machinelearning_ru | Unsorted

Telegram-канал machinelearning_ru - Машинное обучение RU

18194

Все о машинном обучении админ - @workakkk @data_analysis_ml - анализ даннных @ai_machinelearning_big_data - Machine learning @itchannels_telegram -лучшие ит-каналы @pythonl - Python @pythonlbooks- python 📚 @datascienceiot - 📚 РКН: clck.ru/3FmrUw

Subscribe to a channel

Машинное обучение RU

💡 NVIDIA GTC: This Is The Future Of Everything!

https://www.youtube.com/watch?v=Y9cwnHor8es

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Выпущена Distil-Whisper v3 модель для распознавания речи ⚡

> на ~50% меньше параметров и в 6 раз быстрее, чем Large-v3.
> Более точный, чем large-v3

Поддерживает 🦀 Web GPU, Whisper.cpp, Transformers, Faster-Whisper и Transformers.js!

▪Модель
▪Статья

@machinelearning_ru

Читать полностью…

Машинное обучение RU

➕ Google выпустили пользовательский интерфейс, который поможет радиологам использовать модели #ML для скрининга рака
легких.

Система использует компьютерную томографию в качестве входных данных и выдает рейтинг подозрений на рак вместе с соответствующими интересующими областями.

Узнать больше → https://blog.research.google/2024/03/computer-aided-diagnosis-for-lung.html

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Полный курс по генеративному ИИ – Gemini Pro, OpenAI, Llama, Langchain, Pinecone, векторные базы данных и многое другое

https://www.youtube.com/watch?v=mEsleV16qdo

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Sam Altman: OpenAI, GPT-5, Sora, Board Saga, Elon Musk, Ilya, Power & AGI | Lex Fridman Podcast

https://www.youtube.com/watch?v=jvqFAi7vkBc

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🔥 Илон Маск выложил в открытый доступ Grok: 314B параметров. 8 экспертов

https://github.com/xai-org/grok

@machinelearning_ru

Читать полностью…

Машинное обучение RU

💡 StreamingLLM представляет собой новый метод повышения эффективности чат-ботов в продолжительных диалогах.

Многие языковые модели используют key-value кэш в качестве диалоговой памяти. Однако, когда этот кэш переполняется, начальные фрагменты информации (токены) исчезают, что приводит к ухудшению производительности.

Исследователи предложили решение данной проблемы, заключающееся в сохранении хотя бы первого токена в кэше, чтобы минимизировать потери в производительности модели.

Авторы статьи обнаружили интересное явление: большое количество оценок внимания направлено на начальные токены независимо от их релевантности для задачи. Эти токены были названы "приёмниками внимания". Это связано с операцией Softmax, которая требует, чтобы сумма оценок внимания для всех контекстуальных токенов составляла единицу. Даже если текущий запрос слабо соответствует предыдущим токенам, модели все равно нужно распределить значения внимания.

Исследователи отметили, что наличие четырех токенов-приёмников внимания в начале кэша обеспечивает оптимальную производительность. Они также выяснили, что позиционное кодирование каждого токена должно оставаться неизменным даже при добавлении новых токенов и удалении старых. Это сочетание идей позволило StreamingLLM поддерживать непрерывный диалог с пользователем.

Кроме того, Gradio Notebook представляет собой кастомный компонент Gradio, который упрощает демонстрацию моделей машинного обучения для различных задач в Hugging Face Spaces. Gradio Notebook легко использовать: у него есть отдельные ячейки, настраиваемые под конкретную задачу и промпт, и вы можете выбрать любую модель на Hugging Face или загрузить свою.

▪Gradio Notebook
▪ Документация

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🚀 StreamMultiDiffusion: Real-Time Interactive Generation with Region-Based Semantic Control

Потоковая мультидиффузия - новый метод ускорения, позволяющий в режиме реального времени преобразовывать текст в изображения с любой контрольной точки #SD.

📃 👉 https://huggingface.co/papers/2403.09055

@machinelearning_ru

Читать полностью…

Машинное обучение RU

💃 Диффузия для 3D-восстановления поз человека

🌐page: https://statho.github.io/ScoreHMR/
📄paper: https://arxiv.org/abs/2403.09623
🧬code: https://github.com/statho/ScoreHMR

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🔥 Крутейшая подборка для Дата Саентиста. Лучшие бесплатные курсы, книга, разбор вопросов с собеседований, roadmap, полезные материалы по Python, Go, Linux и многое другое.

▪100 вопросов для подготовки к собесу Data Science
▪Видео

▪100 вопросов для подготовки к собесу Python
▪Вопросы Middle
▪Видео

▪Вливаемся в Data Science: подробный roadmap что и где изучать

▪Machine Learning инженер: что/где/как изучать, чтобы въехать

▪ Моя большая практическая шпаргалка SQL (SQLite) с готовыми запросами

▪ Шпаргалка для алгособеса — алгоритмическая сложность, структуры данных, методы сортировки и Дейкстра

▪ Шпаргалка для алгособеса 2 — графовые и строковые алгоритмы

▪40 Полезных инструментов Дата Саентиста

▪Go — 100 вопросов/заданий с собеседований
▪Видео

▪ Где изучать Linux в 2024. Бесплатные курсы, книги и ресурсы
▪Видео

▪ Бесплатные курсы для изучения искусственного интеллекта в 2024 году

▪NumPy: оттачивайте навыки Data Science на практике
▪Numpy полный бесплатный курс

▪Где изучать Python в 2024. Бесплатные курсы, книги и ресурсы
▪ Видео

▪Где искать работу Дата Саентисту в 2024 году

▪Ресурсы для поиска работы Python разработчикам

▪ Бесплатные курсы по большим языковым моделям для дата-сайентистов

@machinelearning_ru

Читать полностью…

Машинное обучение RU

💫 В рейтинге ИИ-разработок от AlPort появились две генеративные нейросети Яндекса.

Текстовая YandexGPT и мультимодальная YandexART оказалась среди самых заметных и перспективных разработок в сфере генеративного искусственного интеллекта по ключевым категориям.

Также Яндекс стал одной из 11 компаний со всего мира, разрабатывающих более одного типа GenAI-моделей наряду с Stability AI, Open AI, Google, Microsoft, Meta , Tencent и Baidu.

🔗 https://habr.com/ru/news/800245/

@machinelearning_ru

Читать полностью…

Машинное обучение RU

✖️ Профессия промпт-инженера не получит большого внимания и не станет востребованной

Рик Баттл и Тедж Голлапуди из VMware, рассказали, что языковые модели часто непредсказуемо реагируют на запросы. На качество ответа влияет сам вопрос, набор входных данных и другие параметры. Разные комбинации дают разный результат, поэтому промпт-инженеры подбирали запросы методом тыка.

Рик Баттл рассказала про способ составления промптов с помощью самой языковой модели. Большинство таких запросов получаются нелогичными для человека, но дают лучший результат, чем метод подбора с помощью проб и ошибок. В одном из случаев запрос, составленный нейросетью, начинался с отсылки на «Звёздный путь», и это заметно улучшило сгенерированный ответ.

Баттл утверждают, что нейросети представляют собой набор математических моделей и алгоритмов, а люди не могут точно знать как они работают, и какие из команд оказывают на нейросеть большее влияние. Поэтому даже пользователи, называющие себя экспертами в промптинге, просто находят удачные комбинации, но не могут составлять сразу хорошие запросы.

В качестве ещё одного примера целесообразности использования нейросети для генерации промптов приводят недавний эксперимент Intel. Инженеры компании разработали инструмент для Stable Diffusion, который получает пользовательский запрос, а потом преобразует его в оптимальный для нейросети. В результате изображения, сгенерированные с помощью преобразованных промптов, получается более детализированными и эстетичными. Для преобразования запросов разработчики Intel обучили специальную нейросеть.

Исследователи считают, что профессия промпт-инженера уже утратила свою актуальность, не успев стать востребованной и популярной. Нынешние языковые модели могут генерировать более правильные и эффективные запросы чем люди.

📎 Читать подробнее

@machinelearning_ru

Читать полностью…

Машинное обучение RU

📹 BaoGPT

BaoGPT - это проект с искусственным интеллектом, который позволяет вам задавать вопросы о видео на YouTube

Полностью OSS, построенный на Long Chain, Anthropic и Qdrant, с интерфейсом Discord и Gradio

Ознакомьтесь с репозиторием здесь.

▪Github

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Claude 3 AI: Smarter Than OpenAI's ChatGPT?

https://www.youtube.com/watch?v=9b7bx423SWk

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🔺 Исследование: ИИ превзошел человека в… дивергентном мышлении

▶️Новое исследование, опубликованное в журнале Scientific Reports, выявило, что генеративные языковые модели могут обладать более высоким уровнем креативности в некоторых задачах.
Сравнив результаты 151 человека и GPT-4, которые выполняли задачи на альтернативное использование предметов (например, как можно еще использовать вилку, кроме очевидного способа), оценку последствий (исходы гипотетических ситуаций – например, исчезновение гравитации) и дивергентные ассоциации (назвать слова, максимально далекие друг от друга по смыслу), авторы сделали интересный вывод.

Вот некоторые интересные выводы из исследования:
🟡Творческий потенциал нейросетей обсуждается учеными, но машины пока не могут определить, что является творчеством вообще.

🟡Нейросети могут генерировать музыку и изображения, которые имеют художественную ценность.

🟡ИИ может быть более креативным в задачах на дивергентные ассоциации.

▶️ Читать подробнее

@vistehno

Читать полностью…

Машинное обучение RU

🔥 Генерация видео из картинок, в качестве промптов 🔥

* 📽️ VideoBooth 📽️ , обеспечивает прямое управление контентом.

- Проект: https://vchitect.github.io/VideoBooth-project/
- Документация: https://arxiv.org/abs/2312.00777
- Код: https://github.com/Vchitect/VideoBooth

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🔥 DeepMind's New AI Plays No Man's Sky!

https://www.youtube.com/watch?v=5U_Q2Lmnq_c

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Вы когда-нибудь задумывались, как в вашей новостной ленте появляются посты, которые вас действительно интересуют? Всё дело в умной системе рекомендаций, которая анализирует ваши предпочтения и интересы.

Дмитрий Решетников, рассказал что такое item2vec-подход, и как с его помощью формируется лента рекомендаций у пользователей ОК:

https://habr.com/ru/companies/vk/articles/800141/

@machinelearning_ru

Читать полностью…

Машинное обучение RU

💡 ML-разработчик Яндекса рассказал о квантизации нейросетевых моделей

Квантизация — это процесс преобразования значений из представления с большим объёмом информации в более компактное представление. Она позволяет экономить вычислительные ресурсы на устройствах, а значит экономить деньги и в целом улучшать пользовательский опыт. Автор подробно разобрал, зачем нужна квантизация и в какой момент лучше всего квантизовать модель, а также рассмотрел разные типы данных и современные методы квантизации.

▪️ Читать статью на Хабре

@machinelearning_ru

Читать полностью…

Машинное обучение RU

📊 Facets

Проект Facets предоставляет инструменты визуализации для понимания и анализа наборов данных машинного обучения: Facets Overview и Facets Dive.

Визуализации реализованы в виде веб-компонентов Polymer и могут быть легко встроены в блокноты Jupyter или веб-страницы.

Прмеры визуализаций можно найти на странице описания проекта Facets: pair-code.github.io/facets/

▪Github

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🤖 ИИ только что лишил меня работы... Я ненавижу тебя Devin

▪️Видео

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Если вы новичок, но уже обладаете базовыми знаниями, это идеальное время, чтобы начать пилить пет проекты. Но если вдруг своей идеи у вас нет, то не отчаивайтесь. Держите крутую подборку таких идей, с примерами реализации:
 
1. Прогнозирование успеваемости студентов.
2. Суммаризация текста.
3. Проекты по CV на любой вкус.
4. Классификация болезней куриц.
5. Проекты классификации аудио (1ч, 2ч, 3ч, 4ч).
6. Проект по обработке и анализу данных.
7. Прогнозирование цен на жилье.
8. Приложение с использованием Langchain и Open AI.
9. Классификация заболеваний почек.
10. LLM для ответов на вопросы по PDF.

@neuro_channel #петпроекты

Читать полностью…

Машинное обучение RU

🏆 DynamiCrafter: Анимация изображений с открытым доменом

▪page: https://doubiiu.github.io/projects/DynamiCrafter
▪paper: https://arxiv.org/abs/2310.12190
▪code: https://github.com/Doubiiu/DynamiCrafter

@machinelearning_ru

Читать полностью…

Машинное обучение RU

⚡️AutoPrompt — полезный фреймворк для оптимизации ваших промтов

Инструмент генерирует и дополняет промт основываясь на запросе юзера. Также фреймворк легко интегрируется с популярными опен-сорс инструментам такими как LangChain, Wandb и Argilla. 

https://github.com/Eladlev/AutoPrompt?tab=readme-ov-file

Читать полностью…

Машинное обучение RU

🖼 Visual Style Prompting with Swapping Self-Attention 🔥

🌐page: https://curryjung.github.io/VisualStylePrompt/
📄paper: https://arxiv.org/abs/2402.12974
🧬code: https://github.com/naver-ai/Visual-Style-Prompting

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🖥 Генераторы данных с открытым исходным кодом!

🟡Mimesis - надежный генератор данных для Python, который может создавать широкий спектр поддельных данных на различных языках.

🟡Spawner - инструмент для создания данных для разнообразных баз данных и искусственного интеллекта. Содержит широкий набор полей, включая возможность пользовательской настройки вручную.

🟡Text or Images, Input or Output - крутейший LLM генератор.

🟡Benerator - генератор текстовых данных для оценки, тестирования и обучения ИИ-моделей.

🟡DataFactory - удобный способ создавать разнообразные наборы тестовых данных для наполнения баз данных и проверки ИИ-моделей.

🟡MockNeat - простой интерфейс для программной генерации данных в форматах json, xml, csv и sql.

🟡Faker - с помощью этого инструмента можно быстро создать фейковые данные для тестов.

@machinelearning_ru

Читать полностью…

Машинное обучение RU

The First AI Virus Is Here!

https://www.youtube.com/watch?v=4NZc0rH9gco

@machinelearning_ru

Читать полностью…

Машинное обучение RU

🔥 Flowise — open source no-code инструмент для создания ИИ-помощников и не только

Flowise создан для аудитории, которая не готова кодить, но хочет получить доступ к AI. В приятном интерфейсе драг-н-дропом из готовых блоков можно построить бекенд своего будущего приложения.

При помощи Flowise можно:
*️⃣Создать чат-бот и встроить на сайт. Есть различные LLM на любой вкус, можно добавить ваши данные для анализа , выдачу поисковых систем, обращаться к сторонним API, и т.д.


FlowiseFlowise можно использовать как API. Тут потолок фантазий находится там, где заканчиваются комбинации блоков, но можно добавить и кастомные инструменты при помощи JS. Можно работать со звуком, изображениями и так далее.

Несколько практических кейсов применения Flowise:
⏩простейший чат-бот. Сможет отвечать на вопросы.
⏩поиск по CSV. Сможет проанализировать данные в файле.
⏩чат-бот, который сможет отвечать на вопросы на основе вашей информации (например, о компании).
⏩ассистент, который использует поисковую выдачу для ответов: может рассказать о погоде, последних новостях и т.д.

📎 Статья с подробным описанием и примерами использования

@machinelearning_ru

Читать полностью…

Машинное обучение RU

📚 Огромный список бесплатных книг по программированию на различных языках, включая русский.

Это один из наиболее популярных репозиториев на GitHub с бесплатной литературой.

▪Github

@machinelearning_ru

Читать полностью…

Машинное обучение RU

Stable Diffusion 3 - An Amazing AI For Free!

https://www.youtube.com/watch?v=GiyGW1tCMOA

@machinelearning_ru

Читать полностью…
Subscribe to a channel