limit 1000 format TSVWithNames' resp = requests.get(url, data=query) string_io = io.StringIO(resp.text) table = pd.read_csv(string_io, sep="\t") 5 / 62 Table (part) 6 / 62 How to sample data You already

limit 1000 format TSVWithNames' resp = requests.get(url, data=query) string_io = io.StringIO(resp.text) table = pd.read_csv(string_io, sep="\t") 5 / 62 Table (part) 6 / 62 How to sample data You already

SQL dialect › Store petabytes of data › Fault-tolerant › 1000+ companies using in production › Open-source › Hundreds of contributors 1 / 97 ClickHouse is NOT Good for › Frequent small inserts › Regular Compatible with Tableau › Open source https://github.com/ClickHouse/clickhouse-odbc JDBC › Allows to use different formats › Configurable › Actively supported › Open source https://github.com/ClickHouse/clickhouse-jdbc main data › Regular updates 74 / 97 External Dictionaries External Dictionaries: Idea › External source › In memory hash table › Asynchronus update › Key-value access › Controllable size bannerid orderid

x86_64, aarch64 (ARM), PowerPC 64, RISC-V • Linux, FreeBSD, mac OS ClickHouse — настоящий open-source 10 • Исходники доступны публично • Патчи от сообщества принимаются • Открытые процессы разработки Максимальное поощрение и вовлечение сообщества Доклад «как организовать живое сообщество вокруг open-source продукта» youtube.com/watch?v=xddKLojmkus&t=4165s ClickHouse — плохая* система 11 Это не оптимально serverless формате с динамическим масштабированием 2. Развитие и поддержка ClickHouse в open-source с целью увеличения размера рынка ClickHouse 3. Исследования и эксперименты для поиска новых

x86_64, aarch64 (ARM), PowerPC 64, RISC-V • Linux, FreeBSD, mac OS ClickHouse — настоящий open-source 10 • Исходники доступны публично • Патчи от сообщества принимаются • Открытые процессы разработки Максимальное поощрение и вовлечение сообщества Доклад «как организовать живое сообщество вокруг open-source продукта» youtube.com/watch?v=xddKLojmkus&t=4165s ClickHouse — плохая* система 11 Это не оптимально serverless формате с динамическим масштабированием 2. Развитие и поддержка ClickHouse в open-source с целью увеличения размера рынка ClickHouse 3. Исследования и эксперименты для поиска новых

a new Clickhouse table ● Init and keep syncing data in one app for a table ● Sync multiple data source to Clickhouse in minutes PTS Provider Transform Sinker ● Major Provider Must Listen ● Merge sharding a new Clickhouse table ● Init and keep syncing data in one app for a table ● Sync multiple data source to Clickhouse in minutes BONUS Time travel history state Create Update Update Delete insert_id Create Update Update Delete Future ● Auto configure through web ● Auto deploy on Kubernetes ● Open source? ● Github: kevwan Q&A Thanks

○ POCs/Training What is Kubernetes? “Kubernetes is the new Linux” Actually it’s an open-source platform to: ● manage container-based systems ● build distributed applications declaratively easy-to-manage resource ClickHouse Operator ClickHouseInstallation YAML file (Apache 2.0 source, distributed as Docker image) ClickHouse cluster resources kubectl apply create resources

○ POCs/Training What is Kubernetes? “Kubernetes is the new Linux” Actually it’s an open-source platform to: ● manage container-based systems ● build distributed applications declaratively ClickHouseInstallation YAML file your-favorite namespace ClickHouse cluster resources (Apache 2.0 source, distributed as Docker image) Altinity ClickHouse Operator Quick Start Installing and removing

подходит для OLTP, Key–Value, хранения блобов › Линейная масштабируемость › Отказоустойчивость › Open source! Ещё раз, коротко Начните использовать ClickHouse сегодня! Вопросы? Можно сюда: › clickhouse-

pattern matching • Constructing relationship graphs = Identifying connections + Grouping data into source-destination pairs • Generating reports = Joining data + Summerizing data • ... The data processing