ClickHouse не тормозит

08 июня 2025 07:43

что показывает select * from system.clusters

ClickHouse не тормозит

08 июня 2025 05:43

Всем привет, вожусь с проблемой уже достаточно долго, но думаю, что решение элементарное
До этого всегда юзал оупенсурсный клик, сейчас решил попробовать Clickhouse Cloud + SharedMergeTree
Сделал сетап на 3 реплики, но проблема в том, что поехали все старые запросы.
Условно даже count(*) просто не тот, так как возвещает только кол-во строк на одном шарде (условно в таблице 170к, возвращается 2300)

Где можно почитать, что с этим делать? Заранее благодарен за ответ

ClickHouse не тормозит

07 июня 2025 18:33

Лимиты в целом штука очень нетривиальная для SQL баз почему-то

ClickHouse не тормозит

07 июня 2025 17:56

кликхаус не пробрасывает limit 10 на сторону MySQL - те он вычитывает все 6м записей. Пробрасывается только where. попробуйте where id = ? написать - должно моментально отработать как и в MySQL

ClickHouse не тормозит

07 июня 2025 11:56

ну тогда insert_quorum=число_реплик можно поставить и посмотреть не сильно ли начал лагать топик

ClickHouse не тормозит

07 июня 2025 11:52

а insert_quorum=N в связке KAFKA ENGINE -> MV не решит проблему реплиции на корню? Или в MV пихать не дает эту настройку?

ClickHouse не тормозит

07 июня 2025 11:35

Нет. При обновлении версии (если обновлять плавно, без даунтайма) блоки могут застревать из-за новой версии формата данных, и они не будут реплицироваться, пока не обновятся все узлы. Также при любом скачке нагрузки, сбое сети и т.д. задержка может увеличиваться непредсказуемо

ClickHouse не тормозит

07 июня 2025 11:31

Нет гарантии, когда блоки доедут, схема нерабочая

ClickHouse не тормозит

07 июня 2025 11:29

Репликация асинхронная, так что инкремент точно работать надежно не будет

ClickHouse не тормозит

07 июня 2025 10:50

⁠⁠⁠⁠⁠⁠⁠⁠⁠⁠⁠⁠⁠🤖 Я позвал админов, а больше ничем не могу помочь.

Мне не выдали прав на удаление сообщений, поэтому у меня лапки.

ClickHouse не тормозит

06 июня 2025 22:34

Странно кипер создавался ,чтобы исключить недостатки зукипера

ClickHouse не тормозит

06 июня 2025 22:34

Подскажите, а у clickhouse keeper или zookeper ? У меня clickhouse keeper просто дох, а с переходом на zoo стало лучше

ClickHouse не тормозит

06 июня 2025 22:30

так в ClickHouse Cloud нет шардов, там один шард и отсюда все проблемы с размером первичного индекса в памяти и скоростью селектов и попыткой ускорить селекты выполняя запрос многими репликами

ClickHouse не тормозит

06 июня 2025 22:09

жаль многим это не доказать

ClickHouse не тормозит

06 июня 2025 21:26

При мрохе - пофигу должно быть ^^

ClickHouse не тормозит

08 июня 2025 07:42

вы точно реплики сделали а не шарды?

вообще sharedmergetree никаких реплик не надо насколько я помню

ClickHouse не тормозит

07 июня 2025 18:36

Вот тут в pr написано почему все непросто https://github.com/ClickHouse/ClickHouse/pull/80070

ClickHouse не тормозит

07 июня 2025 18:03

ещё раз спасибо, нащел в документации
надо более внимательней читать
“The rest of the conditions and the LIMIT sampling constraint are executed in ClickHouse only after the query to MySQL finishes.”

ClickHouse не тормозит

07 июня 2025 17:55

Всем привет.
Создал таблицу используя ENGINE = MySQL
Таблица в 6M записей, проблема в том что если я делаю запрос на mysql стороне всё летает
select * from some_table limit 10;
а вот на стороне clickhouse всё как виснет, хотя есть другие таблицы в 2M записей читает быстро.
Может кто то сталкивался?
Спасибо

ClickHouse не тормозит

07 июня 2025 11:53

если в шард вставляете, то решит по идее, если не в шард, то есть insert_distributed_sync настройка, но наверное оно может затормозить вставку прилично

ClickHouse не тормозит

07 июня 2025 11:49

есть настройка max_replica_delay_for_distributed_queries (по умолчанию 300 сек)

If set, distributed queries of Replicated tables will choose servers with replication delay in seconds less than the specified value (not inclusive). Zero means do not take delay into account.

она говорит выбирать реплики у которых < max_replica_delay_for_distributed_queries delay на селект из дистрибьютед таблицы, так что можно ее выкрутить на минимум по идее, чтобы не было отставания при селекте

ClickHouse не тормозит

07 июня 2025 11:33

Нет гарантии, но как будто по вероятности 5-10 минут достаточно здоровому кластеру реплицироваться нормально в большинстве случаев?

ClickHouse не тормозит

07 июня 2025 11:30

Благодарю, видимо нужно лаг делать по временному окну, чтобы дать данным "растечся"

ClickHouse не тормозит

07 июня 2025 11:26

Всем привет, пытаясь со случайно реплики вычитать инкремент из распределенной таблицы в которую на каждый шард пишет MV из Kafka engine, может ли репликация на какой то реплике не успеть доставить строчки на другую (если вот вот во время чтения была запись из Kafka) с которой мы пытаемся вычитать?

ClickHouse не тормозит

06 июня 2025 23:02

ClickHouse uses one of previous versions of CityHash from Google.

CityHash у гугла менялся раза 3, кх понятно не может себе такое позволить, он же персистентный.

ну и да разница есть, например clickhouse cityHash64 for integers falls back to intHash64

т.е. проще всего использовать другую хешфункцию

ClickHouse не тормозит

06 июня 2025 22:34

у clickhouse cloud конечно clickhouse keeper

ClickHouse не тормозит

06 июня 2025 22:33

https://www.linkedin.com/company/altinity/ 11-50 employees

https://www.linkedin.com/company/clickhouseinc/ 201-500 employees

clickhouseinc в 10 раз больше чем altinity и у clickhouseinc valuation $6.35 billion

ClickHouse не тормозит

06 июня 2025 22:18

А кому доказывать то? История выхода КХ из Я общеизвестна же.

ClickHouse не тормозит

06 июня 2025 22:05

К РФ и сам КХ отношения давно не имеет

ClickHouse не тормозит

06 июня 2025 21:24

у них цены я сейчас глянул в 3 раза дешевле чем в яндексе лол