Python

18 October 2026 14:08

Сериализацию решил, выше написал, скаляр типы

Python

18 October 2026 14:07

я just-in-time читатель чатика, скроллбек листать лень :D

Python

18 October 2026 14:05

Чексум с адлер32 решился за меньше чем 50 строк. Алгоритм точечного обновления я даже хз сколько займет и даст ли это вообще прирост. Там надо строить хэш таблицу для дерева и по всему проходить

Python

18 October 2026 14:05

вопрос скорее всего в том, что переделывать рабочее решение ради сомнительных плюсов нету смысла

Python

18 October 2026 14:03

в алхимии кстати можно данные напрямую дергать

Python

18 October 2026 14:01

Я чуть поменьше сделал - стал загружать скаляр типы вместо сложных ipv4

Python

18 October 2026 13:57

кстати этот самый bytearray можно прозрачно между процессами расшарить через mmap или что там нынче

Python

18 October 2026 13:55

это не фронт-энд, чтобы бандл оптимизировать

Python

18 October 2026 13:55

Надо объяснять почему решение в +500 строк кода не норм?

Python

18 October 2026 13:37

а у него есть какие-то критерии кроме "подозрительно низкий рефкаунт"?

Python

18 October 2026 13:31

(если они конечно там всё не переделали в последние годы со своим фритредингом)

Python

18 October 2026 13:27

А с памятью что делать?

Python

18 October 2026 11:40

а, ну выше уже упомянули

Python

18 October 2026 11:21

https://smallcultfollowing.com/babysteps/blog/2015/04/06/modeling-graphs-in-rust-using-vector-indices/

Python

18 October 2026 11:02

основной смысл вот тут

Python

18 October 2026 14:08

На adler32 - 4 нс на 15 мегов. Но теперь упёрся в алхимию, сериализация полей занимает 700мс 😄

Python

18 October 2026 14:06

ну там вон выше про это было уже 🌚

Python

18 October 2026 14:05

если у нас тормозит хождение в субд, то алхимия как будто ещё одно лишнее звено

Python

18 October 2026 14:04

кстати. А дайте больше контекста насчёт условий и окружения:
1) Есть ли ограничение на число задействованных цпу? Вы трединг упоминали — я предположил, что ограничения нет
2) Почему вы упомянули под ограничение про 500+ строк кода? Моя гипотеза о том, что "простая задача должна решаться просто" является домыслом

Python

18 October 2026 14:02

да, я в какой-то момент что-то заметно ускорил попросив адаптер базы не парсить datetime

Python

18 October 2026 13:59

Ну я бы на шаринг не уповал сильно — среда не обязана его гарантировать
Насчёт компактных представлений / компактных индексов неистово плюсую

Python

18 October 2026 13:56

у меня когда "грузим всю БД раз в 30 секунд в память процесса" стало жрать много памяти, я стал грузить данные в bytearray и на ходу с ними байтоёбствовать %)

Python

18 October 2026 13:55

предположения:
1) реально данные меняются сильно реже, чем раз в 15 секунд
2) когда данные меняются, они меняются мало и точечно
Если хоть одно из предположений работает — ты получишь выигрыш

Python

18 October 2026 13:53

я же тебе говорил — преобразуй полную перезагрузку в событийную работу с диффами

Python

18 October 2026 13:33

мне интересно почему gc впринципе пошел эти обьекты обходить

Python

18 October 2026 13:31

этот gc для того чтобы циклы ловить, если не делать циклов, то много не натечёт, большинство объектов в питоне освобождаются через обычный рефкаунт

Python

18 October 2026 11:41

его еще в самом начале применили

Python

18 October 2026 11:40

Специально для таких хитрожопых случаев в питоне есть gc.disable()

Python

18 October 2026 11:03

вот этот ассайнмент это не циклический gc, это рефкаунт. в расте было бы так же

Python

18 October 2026 11:01

ну как-то так надо

def build(self):
    gc.disable()
    try:
        tree = algorithm()
    finally:
        gc.enable()
    self._tree = tree
    gc.freeze()