ClickHouse - столбцовая СУБД для OLAP (Columnar DBMS).

Основная информация

ClickHouse — столбцовая СУБД для OLAP (Columnar DBMS).

Рейтинг: 0
Создана 3 года назад
Владелец root

Стена группы

Загрузка...
5 месяцев назад
#

Зачем вам нужен ClickHouse


Илья Барбашов расскажет немного о том, какие бывают базы данных и к какому типу относится ClickHouse. Для решения каких задач он был создан и какие задачи, для которых он изначально не создавался, он решает хорошо. Насколько он быстрый и как у него это получается. И как используют ClickHouse в продакшне 24h.tv

1 год назад
#

Как работает ClickHouse, лекция в ШАД




Параллельный и распределённый GROUP BY


2 года назад
#

ClickHouse Yandex


«Новые возможности ClickHouse и планы на будущее», Алексей Миловидов. Яндекс



«Как используют ClickHouse в мире», Александр Зайцев



«О чём не прочтёшь в документации», Мария Мансурова. Яндекс



Блиц доклады пользователей ClickHouse

2 года назад
#

Алексей Миловидов «ClickHouse — аналитическая realtime СУБД»


Уральская конференция веб-разработчиков #UWDC2017 // Разработка. Секция Backend. Алексей Миловидов, Яндекс, Разработчик ClickHouse, Москва «ClickHouse — аналитическая realtime СУБД»

2 года назад
#

ClickHouse Yandex — Анализируем данные — Сигачев А. 2017/01/27 г Орел


Слайды https://www.slideshare.net/gled/click...

Делимся опытом использования аналитической базы данных clickhouse от яндекса. Сравнение обработки статистик Mysql vs Clickhouse
3 встреча http://orel-rb.ru


2 года назад
#

Clickhouse Yandex log analyzer. Создаем анализатор логов на базе Clickhouse. Clickhouse vs mysql



Для многих коммерческий проектов встает вопрос сбора статистики для внутренних нужд. Чем больше показателей мы собираем, тем больше проблем возникает в дальнейшем.

Статистика сайта на базе mysql

Несколько лет назад в качестве базы для хранения данных статистики была выбрана mysql. В базу записывалась базовая информация о совершенных пользователями действиях. Какой товар посмотрели, когда и с какого ip посмотрел и возможно совершил нужное действие (например положил в корзину), был ли пользователь авторизован и тд.

Через полгода работы проекта мы уперлись в производительность SATA диска и заменили его на ssd. Еще через год индексы перестали помещаться в 32Gb ОЗУ. Следующий шагом для рост был новый сервер с 64Gb ОЗУ и 2x512 SSD. При росте объема накопленных данных встала проблема расширения собираемых данных. Те кто работает с mysql и таблицами больше 5G знают насколько затратной становится операция добавление нового поля. Для обеспечения приемлемой скорости выборки данных для отчета мы добавляем индексы — а это вызывает увеличение занимаемого дискового пространства.

Так 600_000_000 записей в год у нас занимают около 500Gb на ssd.

При росте данных требуется увеличение производительности железа. (скорость диска, размер ОЗУ).
Расширение функционала по сбору данных затруднена особенностями работы mysql c большими таблицами. Сейчас добавление новой колонки в основную таблицу занимает несколько суток

Источник
Den
3 года назад
#

Виктор Тарнавский — ClickHouse: очень быстро и очень удобно


3 года назад
#

GROUP BY и Memory limit exceeded Алексей Миловидов


3 года назад
#

ClickHouse визуально Быстрый и наглядный анализ данных в Tabix Игорь Стрыхарь


3 года назад
#

ClickHouse как инструмент аналитика Мария Рыжова


3 года назад
#

ClickHouse для аналитики и аналитиков — Мария Мансурова


3 года назад
#

ClickHouse — прошлое, настоящее, будущее — Алексей Миловидов


Авторизация

Войдите, используя Ваш аккаунт

Войти с помощью

Пользователи