Sberloga in Data

28 июля 2025 12:17

Добро пожаловать в Sberloga in Data, Lisa
Напиши пару слов о себе 👍

Sberloga in Data

09 февраля 2024 15:45

📖Paper Watch: Методы фильтрации и сбора данных для instruction tuning

Новый выпуск #paperwatch посвящен обзору и сравнению методов сбора данных для instruction tuning, а также оценке влияния различных параметров sft сетов. Если вкратце, то многие работы утверждают, что количество данных при файнтюне - не самый важный параметр, и при должном внимании к сбору датасета можно поднять качество модели при меньших затратах вычислений.

📺Запись
🖥Слайды

Sberloga in Data

09 февраля 2024 13:29

Whisper или whisperX сейчас из коробки вполне норм работают, чтобы распознавать речь на английском с разнообразными/хреновыми акцентами и потенциально в шумных местах?

Sberloga in Data

09 февраля 2024 11:25

И, скажем так, "карго культ" (копи-паст)) Когда люди делают что-то не понимания зачем это и как работает)

Sberloga in Data

09 февраля 2024 11:24

Главное не забывать про принцип dollar cost averaging)

Sberloga in Data

09 февраля 2024 11:23

И когда сказал применить фильтры для отбора данных, которые должны были сократить выборку в 10 раз. Время расчёта было 8 часов, стало 6 часов...

Ну пусть не в 10 сократиться, а в 5. Но явно тогда время все равно не 6 часов будет

Sberloga in Data

09 февраля 2024 11:22

Вот это прям больно и знакомо. Я в какой-то момент с человеком дошел до того, что мы проговаривали все шаги по выполнению задачи. Тема хорошая, но я все равно проиграл(

Sberloga in Data

09 февраля 2024 11:21

Кажется это просто невнимательность, я сам такой

Sberloga in Data

09 февраля 2024 11:20

Ну как пример. Сказал попробуй добавить больше деревьев в бустинг, с 700 до 1000. Говорит, добавила, метрики не сильно изменились. Точно добавила, все проверила?? Да, точно. Смотрю, раньше сам файл модели был около 30мб, стал 31мб.
Говорю, - не может быть такого, не добавила что-то. Загружаю модель - действительно не добавила.
Но вот элементарной самопроверки и логики нет

Sberloga in Data

09 февраля 2024 11:18

И у чем выражается нетехническое мышление?

Sberloga in Data

09 февраля 2024 11:17

Вышестоящее начальство не разрешает) Типа нового джуна сложно найти на оставшийся бюджет) Но и мне несколько интересно как руководителю поработать с таким сотрудником, попробовать методики доведения джунов до ума)

Sberloga in Data

09 февраля 2024 11:13

Не напоминай))) Прямо в больное)) Взял здесь девочку одну. Гуманитария, но очень мотивированную и работоспособную. Думал это всё закроет ее пробелы по знаниям... Нетттт.. Оказывает техническое мышление очень и очень важное..

Sberloga in Data

09 февраля 2024 11:12

Я скорее с позиции что век ИТишника не долог) Сейчас есть ЗП. Вклады в банки и инвестиции - может рухнуть как организация, так и рубль. А цена на недвигу более-менее с инфляцией растет. Если не рухнет в полное дно вся страна, то на пенсии сможешь продать за что купил (по покупательской способности) с поправкой на устаревание фонда, но с + от аренды

Sberloga in Data

09 февраля 2024 11:09

На самом недвижка - это тот же фондовый рынок в какой-то степени. Можно как иксы делать, так и прозябать с неликвидом, приносящим 3-4% в год

Sberloga in Data

09 февраля 2024 11:07

По факту особо лучше, без больших затрат времени, ничего не знаю. Но главное что не только в Мск можно смотреть. Конечно, проблемы и риски со съёмщиками и прочее. Можно и инвестиции, но это надо конкретно следить всё, что требует много времени. Да и время не самое стабильное

Sberloga in Data

09 февраля 2024 15:49

повод записать ещё один пейпервотч с расширенным взглядом ;)

Sberloga in Data

09 февраля 2024 15:00

Добро пожаловать в Sberloga in Data, Марина Фомина
Напиши пару слов о себе 👍

Sberloga in Data

09 февраля 2024 12:01

Добро пожаловать в Sberloga in Data, Варвара Пронина
Напиши пару слов о себе 👍

Sberloga in Data

09 февраля 2024 11:24

Вот понимания наличия косвенных признаков нет

Sberloga in Data

09 февраля 2024 11:24

Да, не внимательность. Но, кажется, нет понимания что если ты заявляешь результаты, влияющие на всю команду и весь процесс решения, то надо это все проверять хотя бы бегло по косвенным признакам

Sberloga in Data

09 февраля 2024 11:22

Люблю брр и запускай модельку

Sberloga in Data

09 февраля 2024 11:21

То есть, гуманитариям сложно понять концепцию черного ящика, условно) Им нужно погрузиться, полностью понять, и т.д.

Sberloga in Data

09 февраля 2024 11:21

Это спекулятивный вопрос. Лично на мой взгляд - с умением работать с абстракциями. Т.е., условно решать проблемы, не слишком глубоко в них погружаясь.

Sberloga in Data

09 февраля 2024 11:20

По итогам обсуждения решил закинуть немножко в индекс мосбиржи.)

Sberloga in Data

09 февраля 2024 11:18

В некотором смысле люди без образования, полные самоучки, реально быстрее осваивают, чем люди с гуманитарным образованием.

Sberloga in Data

09 февраля 2024 11:15

Это да, но я звезд с неба на пенсии хватать не собираюсь) Продуктовые товары и основные медикаменты у нас свои, покупаем за рубли)

Но это скорее позиция минимальная) Чтобы точно выжить мог на пенсии))

Sberloga in Data

09 февраля 2024 11:13

Если смотреть в среднем по больнице, то в $ недвижка стоит на месте) так что это стокпикинг тот еще. Либо падает, но это от точки входа сильно зависит

Sberloga in Data

09 февраля 2024 11:10

Ну и свои скилы и регалии главное - статьи, степени) Жаль людей не дают в Сбере, а то 3 научных исследования висит с потенциалом на конфы А/А*, но ладно, как минимум на Q1)) А людей нет чтобы и статейку написать

Sberloga in Data

09 февраля 2024 11:08

Датасаентисты - специалисты по любому вопросу😂

Sberloga in Data

09 февраля 2024 10:58

потому что она географически была