spektom Feb 28 2018 at 10:19

ViyaDB: аналитическая база данных для несортированных данных

6 min

Big Data*SQL*Programming*

From sandbox

+15

Comments 15

Naglec Feb 28 2018 at 10:36

Аппликации — это которые в детском саду делают? А мобильные аппликации на смартфонах в детском саду?

spektom Feb 28 2018 at 11:52

Поправил, спасибо.

NYM Feb 28 2018 at 12:07

Рассматривали ли clickhouse? Если да, то по каким причинам не стали его использовать?

spektom Feb 28 2018 at 12:30

Насколько мне известно, в данный момент рассматривают именно его. По слухам, показатели хорошие при использовании AggregatingMergeTree. ИМХО, если его не выберут, то по одной из причин:

— Сложность настройки.
— Компании, предоставляющие техподдержку (вроде Altinity), слишком мало времени находятся на рынке.
— Недостаток программеров в компании, способных понять код С++.
— Недоверие к продуктам российской компании (пусть даже и с открытым исходным кодом).

RPG18 Feb 28 2018 at 12:36

— Недостаток программеров в компании, способных понять код С++.

Так и ваша ViyaDB на C++ написана.

spektom Feb 28 2018 at 13:00

Так она и не используется в компании.

NYM Feb 28 2018 at 13:00

Спасибо.

Рассматривал clickhouse как C++ разработчик.
Современные программные продукты для работы с ними имеют клиентские библиотеки на многих современных языках. Поддержка библиотек на C++ минимальна или ее нет. Можно найти низкоуровневое решение на C. Для работы с clickhouse есть C++ библиотека. Это меня и заинтересовало.
Попробовав поработать с clickhouse, осталось много разных впечатлений как от СУБД, так и от клиентской C++ библиотеки. Скорость выполнения запросов на выборку данных — оставшееся хорошее впечатление после рассмотрения clickhouse.

VioletGiraffe Feb 28 2018 at 12:26

Запросы транслируются в машинный код

Как это реализовано?

И ещё: ваша БД хранится на диске, или исключительно в памяти?

spektom Feb 28 2018 at 12:35

— Генерируется код запроса на С++, который затем компилируется с помощью GCC (в будущем планируется использовать LLVM)
— Исключительно в памяти. Партиции реплицированы между нодами (и дата центрами). Данные хранятся также на каком-нибудь S3, главное обеспечить их быстрое восстановление.

Hixon10 Feb 28 2018 at 22:38

То есть, всё работает так?
SQL-like query -> AST -> generated c++ code -> compilation of c++ code with GCC -> binary file. А потом для данного запроса вы просто запускаете этот бинарник?