## YATAS ## ClickHouse: настоящее и будущее Бэкенд ## Я расскажу 01 Почему ClickHouse — хорошая система 02 Почему ClickHouse — плохая система 03 И что с этим делать Impala Spark SQL Presto/Trino IBM Netezza, IBM BLU TiDB ## ClickHouse — хорошая система  Это более оптимально ## ClickHouse не тормозит - Система создана конкретных сценариев • Внимание к деталям и специализация под сценарии нагрузки Организация ## ClickHouse — надёжная система • Кросс-ДЦ master-master репликация • Надёжная запись и хранение данных •

## YATAS ## ClickHouse: настоящее и будущее Бэкенд ## Я расскажу 01 Почему ClickHouse — хорошая система 02 Почему ClickHouse — плохая система 03 И что с этим делать Impala Spark SQL Presto/Trino IBM Netezza, IBM BLU TiDB ## ClickHouse — хорошая система  Это более оптимально ## ClickHouse не тормозит - Система создана сценарии нагрузки  ## ClickHouse — надёжная система • Кросс-ДЦ master-master репликация • Надёжная запись и хранение данных •

## Тестирование ClickHouse которого мы заслуживаем Александр Сапин BackendConf PUT 2019 Профессиональная конференция для веб-разработчиков ## Про себя > Работаю в Яндексе > Разрабатываю Разрабатываю ClickHouse > Иногда пишу тесты ## Про ClickHouse ## ClickHouse:ПоколоночнаяСУБД > Не тормозит. > Масштабируется линейно > Позволяет хранить петабайты данных > Поддерживает гибкий гибкий SQL с расширениями Отказоустойчив при работе в разных ДЦ ## ☐ ## ClickHouse: как проект Открытый исходный код на C++ > Больше 300 тысяч строк кода Открытый репозиторий на GitHub Изменения через

## Яндекс ## ClickHouse профессиональная конференция для веб-разработчиков Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать Алексей Зателепин BC 2017 Backend Conf 2010—2016 Яндекс Карты 2017—... ClickHouse  ## Задачи, для которых подходит ClickHouse Есть поток событий Действия пользователей выводы  ## Идеология ClickHouse Интерактивные запросы по данным, обновляемым в реальном времени Диалект SQL + расширения Стараемся

## Yandex Yandex # Integrating ClickHouse into Your IT Ecosystem Alexander Sapin, Software Engineer ClickHouse in Production ## ClickHouse DBMS > Blazing fast > Linearly scalable > Flexible Fault-tolerant > 1000+ companies using in production Open-source > Hundreds of contributors ☐ ## ClickHouse is NOT Good for > Frequent small inserts ☑ Regular updates Key-value access with high request Network File System (S3, HDFS) Key-Value Storage (Redis, Aerospike) > Relational DBMS (PostgreSQL, MySQL) > NoSQL DBMS (MongoDB, Couchbase) ![Image](/uploads/documents/6/e/c/d/6ecd07022d27fdd292ac1d02cae68ff4/p10_1

## ClickHouse Alexander Zaitsev ## Altinity ## Altinity Background • Premier provider of software and services for ClickHouse • Incorporated in UK with distributed team in US/Canada/Europe • US/Europe US/Europe sponsor of ClickHouse community • Offerings: ☐ 24x7 support for ClickHouse deployments ○ Software (Kubernetes, cluster manager, tools & utilities) ☐ POCs/Training ## What is Kubernetes? Why run ClickHouse on Kubernetes? Other applications are already there Easier to manage than deployment on hosts Bring up data warehouses quickly Portability ## I s it easy to run ClickHouse on Kubernetes

## Altinity ## ClickHouse on Kubernetes! Alexander Zaitsev, Altinity Limassol, May 7th 2019 ## Altinity Background ● Premier provider of software and services for ClickHouse • Incorporated in UK with with distributed team in US/Canada/Europe • US/Europe sponsor of ClickHouse community • Offerings: ☐ 24x7 support for ClickHouse deployments ○ Software (Kubernetes, cluster manager, tools & utilities) Why run ClickHouse on Kubernetes? 1. Other applications are already there 2. Portability 3. Bring up data warehouses quickly 4. Easier to manage than deployment on hosts ## What does ClickHouse look like

## Автоматизация управления ClickHouse-кластерами в Kubernetes Владислав Клименко и Валерий Панов HighLoad Siberia 2019 Профессиональная конференция для разработчиков высоконагруженных систем THE • автоматизировать развертывание ## ClickHouse? Что это?  ClickHouse ClickHouse - столбцовая система управления базами Зачем ClickHouse в Kubernetes? • Все компоненты системы уже в к8s. • Максимальная унификация управления. • Нужно быстро строить хранилища данных. • Нужна максимальная переносимость. ## ClickHouse в Kubernetes

wire протокола в ClickHouse Баранов Юрий, 155 Научный руководитель: Миловидов Алексей Николаевич, руководитель группы разработки СУБД ClickHouse ## Предметная область ClickHouse - это колоночная аналитическая Существующие в ClickHouse интерфейсы Утилита командной строки Нативный интерфейс (TCP) HTTP JDBC Driver ODBC Driver ## Актуальность задачи Отсутствие необходимости собирать нативный клиент ClickHouse Возможность сервер в ClickHouse Подобрать механизм аутентификации, применимый в ClickHouse Добавить тесты ## Проблемы при внедрении в ClickHouse Некоторые клиенты использовали поля, недоступные в ClickHouse: https://bugs

## Sync Clickhouse with MySQL/MongoDB Company: Xiaoxin Tech. ## About Industry: Education Team: Big Data Leader: wangchao@xiaoheiban.cn ## 100 billion data this year till now  ## We use Clickhouse in our daily tasks ## Chanllenges ![Image](/uploads/documents/a/6/c/0/a6c0cfda6310d62e78a84f228315a528/p6_1 Solutions 1 ## Replay binlog/oplog CRUD directly Can't update/delete table frequently in Clickhouse Not suitable for MongoDB ## Possible Solutions 2 MySQL Engine Creating a Database Not suitable