ClickHouse не тормозит

19 мая 2025 14:25

ну и сразу https://github.com/ClickHouse/ClickHouse/issues/80249

ClickHouse не тормозит

19 мая 2025 14:22

это вообще-то про КХ ограничения, это не имеет отношения к битве кипера и зукипера.

и все немнжко изменилось с тем пор когда эту статью написали

ClickHouse не тормозит

19 мая 2025 14:20

у кипера есть небольшое преимущество в том что там внедряются операции которых нет в зукипере

<feature_flags>
<filtered_list>1</filtered_list>
<multi_read>1</multi_read>
<check_not_exists>1</check_not_exists>
<create_if_not_exists>1</create_if_not_exists>
<remove_recursive>1</remove_recursive>
они потенциально снижают кол-во операций с кипером

Плюс в кипере пилят возможность использовать rocksdb чтобы уйти от in-memory database

ClickHouse не тормозит

19 мая 2025 14:18

Есть неявное описание по ограничению на количество таблиц
https://kb.altinity.com/altinity-kb-schema-design/how-much-is-too-much/

ClickHouse не тормозит

19 мая 2025 14:17

да есть ишью в гитхабе где в бенчмарке показано что кипер медленее чем зукипер и что?

ClickHouse не тормозит

19 мая 2025 14:16

Хмммммммм, возможно я как-то не так читаю?

ClickHouse не тормозит

19 мая 2025 14:14

что за кол-во? Там нет лимита, и никто не обещал что кипер меньше памяти использует и лимит по кол-ву таблиц у него выше

ClickHouse не тормозит

19 мая 2025 14:13

Главное в будущем не упереться в количество реплицированных таблиц на зукипере

ClickHouse не тормозит

19 мая 2025 14:09

Можете подробнее рассказать, где были проблемы?
И какое решение в итоге используете?)

ClickHouse не тормозит

19 мая 2025 14:05

понял, странно конечно гугл ищет)

ClickHouse не тормозит

19 мая 2025 14:04

https://clickhouse.com/docs/ru/guides/sre/keeper/clickhouse-keeper#migration-from-zookeeper

работает, пути поменялись просто

ClickHouse не тормозит

19 мая 2025 14:04

а потом уже все сущности как я понимаю пересоздавать нужно чтобы все данные что на 1 хосте были идентичны?

ClickHouse не тормозит

19 мая 2025 14:02

Привет!
На проде мигрировал с зукипира 3.4 на кликхаус-кипер 25.3.
Проблем не было, делал по оф доке кликхаус-кипера, но она сейчас почему то не доступна
https://clickhouse.com/docs/jp/ru/operations/clickhouse-keeper

ClickHouse не тормозит

19 мая 2025 13:55

Можешь сделать так

CREATE DATABASE IF NOT EXISTS dm_dev ON CLUSTER dev_cl;

ClickHouse не тормозит

19 мая 2025 13:53

SQL Error [82] [07000]: Code: 82. DB::Exception: Database dm_dev already exists. (DATABASE_ALREADY_EXISTS) (version 24.8.2.1)

ClickHouse не тормозит

19 мая 2025 14:23

я не против переезда на кипер

просто я не согласен с чьим-то бредом: "Ага, мы уперлись в количество реплицированных таблиц. Таблиц было порядка 700-800 и данных на 40 ТБ. У нас кластер зукипира развалился," -- это все чушь.

ClickHouse не тормозит

19 мая 2025 14:21

Ну и условный zoo navigator сейчас отлично работает с chkeeper, кажется что кхкипер ничем не хуже, а возможно и лучше зукипера и смысл тогда на нем оставаться?

ClickHouse не тормозит

19 мая 2025 14:19

но в любом случае, переехав на кх-кипер, проблема исчезла

ClickHouse не тормозит

19 мая 2025 14:18

Ишью не видел, зато читаю офф доку) Ссылка чуть выше в треде если что, но могу и продублировать

ClickHouse не тормозит

19 мая 2025 14:16

развалился он точно не из-за 700 таблиц и 40ТБ, это детские объемы для зукипера и влияет кол-во инсертов и кол-во реплик, у меня в одном зукипере живут несколько кластеров КХ, с 5000 таблиц

ClickHouse не тормозит

19 мая 2025 14:15

Ага, мы уперлись в количество реплицированных таблиц. Таблиц было порядка 700-800 и данных на 40 ТБ. У нас кластер зукипира развалился, пришлось экстренно переезжать на кх-кипер

ClickHouse не тормозит

19 мая 2025 14:13

Это да, но тут все зависит от количества данных.(Впрочем я стараюсь везде где это возможно переехать на chkeeper)

ClickHouse не тормозит

19 мая 2025 14:10

В статье нет жёсткого требования использовать кхкипер вместо зукипера, просто упоминается о том что кхкипер более совершенный, работает быстрее и потребляет меньше ресурсов. Поэтому фактически вам совершенно нет необходимости делать довольно рискованную операцию по миграции киперов по этой конкретной причине.

ClickHouse не тормозит

19 мая 2025 14:06

Вас на японскую версию закинуло просто)

ClickHouse не тормозит

19 мая 2025 14:05

да, важно чтобы твои таблицы имели движок ReplicatedMergeTree

ClickHouse не тормозит

19 мая 2025 14:04

да, она самая, значит русско-язычная версия не работает)

ClickHouse не тормозит

19 мая 2025 14:04

https://clickhouse.com/docs/guides/sre/keeper/clickhouse-keeper#migration-from-zookeeper Это?

ClickHouse не тормозит

19 мая 2025 14:02

Делал, работает нормально, но всё зависит от древности и того и другого

ClickHouse не тормозит

19 мая 2025 13:55

так создавать без on cluster надо, только на том хосте, на которой ее нет)

ClickHouse не тормозит

19 мая 2025 13:52

CREATE DATABASE dm_dev ON CLUSTER dev_cl;