## YATAS ## ClickHouse: настоящее и будущее Бэкенд ## Я расскажу 01 Почему ClickHouse — хорошая система 02 Почему ClickHouse — плохая система 03 И что с этим делать Impala Spark SQL Presto/Trino IBM Netezza, IBM BLU TiDB ## ClickHouse — хорошая система  Это более оптимально ## ClickHouse не тормозит - Система создана конкретных сценариев • Внимание к деталям и специализация под сценарии нагрузки Организация ## ClickHouse — надёжная система • Кросс-ДЦ master-master репликация • Надёжная запись и хранение данных •

## YATAS ## ClickHouse: настоящее и будущее Бэкенд ## Я расскажу 01 Почему ClickHouse — хорошая система 02 Почему ClickHouse — плохая система 03 И что с этим делать Impala Spark SQL Presto/Trino IBM Netezza, IBM BLU TiDB ## ClickHouse — хорошая система  Это более оптимально ## ClickHouse не тормозит - Система создана сценарии нагрузки  ## ClickHouse — надёжная система • Кросс-ДЦ master-master репликация • Надёжная запись и хранение данных •

## Тестирование ClickHouse которого мы заслуживаем Александр Сапин BackendConf PUT 2019 Профессиональная конференция для веб-разработчиков ## Про себя > Работаю в Яндексе > Разрабатываю Разрабатываю ClickHouse > Иногда пишу тесты ## Про ClickHouse ## ClickHouse:ПоколоночнаяСУБД > Не тормозит. > Масштабируется линейно > Позволяет хранить петабайты данных > Поддерживает гибкий гибкий SQL с расширениями Отказоустойчив при работе в разных ДЦ ## ☐ ## ClickHouse: как проект Открытый исходный код на C++ > Больше 300 тысяч строк кода Открытый репозиторий на GitHub Изменения через

## Яндекс ## ClickHouse профессиональная конференция для веб-разработчиков Что нужно знать об архитектуре ClickHouse, чтобы его эффективно использовать Алексей Зателепин BC 2017 Backend Conf 2010—2016 Яндекс Карты 2017—... ClickHouse  ## Задачи, для которых подходит ClickHouse Есть поток событий Действия пользователей выводы  ## Идеология ClickHouse Интерактивные запросы по данным, обновляемым в реальном времени Диалект SQL + расширения Стараемся

## Yandex Yandex # Integrating ClickHouse into Your IT Ecosystem Alexander Sapin, Software Engineer ClickHouse in Production ## ClickHouse DBMS > Blazing fast > Linearly scalable > Flexible Fault-tolerant > 1000+ companies using in production Open-source > Hundreds of contributors ☐ ## ClickHouse is NOT Good for > Frequent small inserts ☑ Regular updates Key-value access with high request Network File System (S3, HDFS) Key-Value Storage (Redis, Aerospike) > Relational DBMS (PostgreSQL, MySQL) > NoSQL DBMS (MongoDB, Couchbase) ![Image](/uploads/documents/6/e/c/d/6ecd07022d27fdd292ac1d02cae68ff4/p10_1

## ClickHouse Alexander Zaitsev ## Altinity ## Altinity Background • Premier provider of software and services for ClickHouse • Incorporated in UK with distributed team in US/Canada/Europe • US/Europe US/Europe sponsor of ClickHouse community • Offerings: ☐ 24x7 support for ClickHouse deployments ○ Software (Kubernetes, cluster manager, tools & utilities) ☐ POCs/Training ## What is Kubernetes? Why run ClickHouse on Kubernetes? Other applications are already there Easier to manage than deployment on hosts Bring up data warehouses quickly Portability ## I s it easy to run ClickHouse on Kubernetes

## Altinity ## ClickHouse on Kubernetes! Alexander Zaitsev, Altinity Limassol, May 7th 2019 ## Altinity Background ● Premier provider of software and services for ClickHouse • Incorporated in UK with with distributed team in US/Canada/Europe • US/Europe sponsor of ClickHouse community • Offerings: ☐ 24x7 support for ClickHouse deployments ○ Software (Kubernetes, cluster manager, tools & utilities) Why run ClickHouse on Kubernetes? 1. Other applications are already there 2. Portability 3. Bring up data warehouses quickly 4. Easier to manage than deployment on hosts ## What does ClickHouse look like

## Автоматизация управления ClickHouse-кластерами в Kubernetes Владислав Клименко и Валерий Панов HighLoad Siberia 2019 Профессиональная конференция для разработчиков высоконагруженных систем THE • автоматизировать развертывание ## ClickHouse? Что это?  ClickHouse ClickHouse - столбцовая система управления базами Зачем ClickHouse в Kubernetes? • Все компоненты системы уже в к8s. • Максимальная унификация управления. • Нужно быстро строить хранилища данных. • Нужна максимальная переносимость. ## ClickHouse в Kubernetes

wire протокола в ClickHouse Баранов Юрий, 155 Научный руководитель: Миловидов Алексей Николаевич, руководитель группы разработки СУБД ClickHouse ## Предметная область ClickHouse - это колоночная аналитическая Существующие в ClickHouse интерфейсы Утилита командной строки Нативный интерфейс (TCP) HTTP JDBC Driver ODBC Driver ## Актуальность задачи Отсутствие необходимости собирать нативный клиент ClickHouse Возможность сервер в ClickHouse Подобрать механизм аутентификации, применимый в ClickHouse Добавить тесты ## Проблемы при внедрении в ClickHouse Некоторые клиенты использовали поля, недоступные в ClickHouse: https://bugs

## 011101 UDF in ClickHouse Concept, Development, and Application in ML Systems ## About CraiditX ## CraiditX 氪信, a finance AI startup since 2015 ## The Main Business • AI-based risk control • AI-based Interested in computer system and language stuff • 8 organizations, 90+ repos, 600+ followers ## ClickHouse Contributor  hczhcz Output Task = Query or external program Query = “CREATE TABLE ... AS SELECT ...” ## Why ClickHouse ## Limited hardware resources & time → efficiency matters ## Performance • Each node is