18194
Все о машинном обучении админ - @workakkk @data_analysis_ml - анализ даннных @ai_machinelearning_big_data - Machine learning @itchannels_telegram -лучшие ит-каналы @pythonl - Python @pythonlbooks- python 📚 @datascienceiot - 📚 РКН: clck.ru/3FmrUw
🔥 PyTorch реализация GPTs с использованием нейросетей Колмогорова-Арнольда (KAN)
Чуть больше недели прошло с анонса нейросети принципиально новой архитектуры (Kolmogorov-Arnold Network), и вот уже первые первые реализации на PyTorch, встречайте
— pip install kan_gpt
🖥 GitHub
@machinelearning_ru
👉 На Хабре опубликовали гайд, который облегчает разработчикам задачу интеграции YandexGPT API
🔎 Команда AllSee поделились своим опытом создания SDK для YandexGPT.
🔗 Ссылка
@machinelearning_ru
🧠 Улучши ИИ на хакатоне X5 Tech AI Hack! У тебя будет 10 дней, чтобы избавить нейросеть от галлюцинаций или научить ее работать с конфиденциальными данными. Призовой фонд от X5 Tech – 2 000 000 рублей.
Старт ML-соревнования – 17 мая. Не жди дедлайна, регистрируйся прямо сейчас: https://cnrlink.com/x5techaihackmlru
Приглашаем на хакатон экспертов по Data Science, ML-специалистов, разработчиков на Python и всех остальных, кто хочет прокачать свои знания о создании ИИ. На выбор – один из двух треков:
🥷 Трек 1. Маскирование. При использовании сторонней языковой модели нельзя передавать ей чувствительные данные организации – имена клиентов, доменные адреса и прочие. Поэтому участникам необходимо подготовить алгоритм, который заменит эти сведения в тексте без потери смысла.
🔎 Трек 2. Детекция галлюцинаций. Никто не любит, когда ИИ-ассистент в ответ на вопрос дает неправильную информацию. Задача конкурсантов – разработать систему, которая сможет эффективно выявлять аномалии в текстах, сгенерированных нейросетью.
Хакатон продлится 10 дней. У тебя будет шанс получить консультацию от крутых ML-экспертов и специалистов по Data Science, обсудить решения с единомышленниками, узнать больше о проектах X5 Tech.
28-29 мая по результатам тестирования моделей участников 5 лучших команд в каждом треке получат приглашение на финал в Москве. Церемония награждения пройдет 30 мая на мероприятии X5 Future Night.
Участвуй в X5 Tech AI Hack и внеси свой вклад в развитие ML-технологий: https://cnrlink.com/x5techaihackmlru
Реклама. ООО «ИТ ИКС 5 Технологии». ИНН 1615014289. erid: LjN8KMuvK
🌟 StarCoder — LLM для генерации кода с улучшенной точностью
StarCoder2-15B-Instruct-v0.1 — самая первая полностью самосогласованная LLM, обученная с помощью конвейера Hugging Face.
Этот конвейер использует StarCoder2-15B для генерации тысяч пар "промпт-ответ", которые затем используются для точной настройки StarCoder-15B без каких-либо человеческих аннотаций или дистиллированных данных из огромных и проприетарных LLM.
StarCoder2-15B-Instruct получил оценку HumanEval 72.6, что даже превышает оценку CodeLlama-70B-Instruct в 72.0
🤗 Hugging Face
@machinelearning_ru
⚡️ Unreal Engine 5.4: Game Changer!
https://www.youtube.com/watch?v=yP_yTgiaG3E
@machinelearning_ru
🔥Подборка лучших обучающих каналов для программистов.
➡️ Делитесь с коллегами и сохраняйте себе, чтобы не потерять
⚡Машинное обучение
Machine Learning - запускаем лучшие ИИ модели, пишем код, погружаемся в нейросети
Ml ru - актуальные статьи, новости, код и обучающие материалы
Ml Jobs - вакансии ML
ML Книги - актуальные бесплатные книги МО
ML чат
Ml Собеседование - подготовка к собесу по мл, алгоритмам, коду
🏆 Golang
Golang
Golang собеседование - разбор задач и вопросов с собесов
Golang вакансии -работа для Go разработчика
Golang книги библиотека книг
Golang задачи и тесты
Golang чат
Golang news - новости из мира go
Golang дайджест
💥 Linux /Этичный хакинг
Linux Academy - гайды, секреты и лучшие материалы по Linux
Kali linux - погрузись в мир этичного хакинга и кибербезопасности
linux_kal - kali чат
Информационная безопасность
🚀 Data Science
Анализ данных - полезные фишки, код, гайды и советы, маст-хэв датасаентиста
Data Jobs - ds вакансии
Аналитик данных
Data Science книги - актуальные бесплатные книги
Big data
🛢Базы данных
Sql базы данных - научим работе с базами данных профессионально
Библиотека баз данных
SQL чат
Вакансии Sql аналитик данных
#️⃣C#
С# академия - лучший канал по c#
С# заметки — код, лучшие практики, заметки программиста c#
С# задачи и тесты
С# библиотека - актуальные бесплатные книги
C# вакансии - работа
🐍 Python
Python/django - самый крупный обучающий канал по Python
Python Собеседование - подготовка к собеседовению python и разбор алгоритмов
Pro python - статьи, новости, код и обучающие материалы
Python Jobs - вакансии Python
Python чат
Python книги
☕ Java
Java академия - java от Senior разработчика
Java вакансии
Java чат
Java вопросы с собеседований
Java книги
💻 C++
C++ академия
С++ книги
C++ задачи - подготовка к собеседовению мл, алгоритмам
C++ вакансии
⚡️ Frontend
Javascript академия - крупнейший js канал
React - лучшие гайды и советы по работе с react
Frontend - тутрориалы, уроки, гайды, код
PHP
Книги frontend
Задачи frontend
🦀 Rust
Rust программирование
Rust чат
Rust книги для программистов
📲 Мобильная разработка
Android разработка
Мобильный разработчик гайды и уроки
🇬🇧 Английский для программистов
🧠 Искусственный интеллект
ИИ и технологии
Neural - нейросети для работы и жизни
Книги ИИ
Artificial Intelligence
🔥 DevOPs
Devops для программистов
Книги Devops
🌟 Docker/Kubernets
Docker
Kubernets
📓 Книги
Библиотеки Книг для программситов
💼 Папка с вакансиями:
Папка Go разработчика:
Папка Python разработчика:
Папка Data Science
Папка Java разработчика
Папка C#
Папка Frontend
💥 Бесплатный Chatgpt бот
Meta’s Llama3 AI: ChatGPT Intelligence… For Free!
https://www.youtube.com/watch?v=8FFL86K4SfY
@machinelearning_ru
🔘 15 мая увидимся и расскажем, как мы создаем свою платформу голосовых технологий
Расскажем, какие задачи решаем при разработке Tinkoff VoiceKit. Обсудим, какие алгоритмы лежат в основе text normalization — важного компонента NLP-пайплайна синтеза речи. Почему обновление модели, обрабатывающей десятки тысяч часов речи в сутки, — это сложно, и как при конвертации голоса добиться максимальной похожести на изначальный. Регистрация тут.
erid:2Vtzqv41rwz
Реклама. АО "Тинькофф Банк", ИНН 7710140679, лицензия ЦБ РФ № 2673
⚡️ The cuda-checkpoint Utility
NVIDIA только что добавила функцию определения контрольных точек CUDA с помощью: https://github.com/NVIDIA/cuda-checkpoint
которая должна позволить CRIU выполнять определение контрольных точек на уровне приложения, включая сохранение / восстановление состояния графического процессора.
▪ Github
@machinelearning_ru
🛂 ConsistentID : Portrait Generation with Multimodal Fine-Grained Identity Preserving
Consistent ID - новая модель, которая позволяет создавать различные персонализированные изображения для документов на основе текстовых промптов и исходного фото 🤌
• Github: https://github.com/JackAILab/ConsistentID
• Paper: https://arxiv.org/abs/2404.16771
• Project: https://ssugarwh.github.io/consistentid.github.io/
• Demo: http://consistentid.natapp1.cc/
@ai_machinelearning_big_data
⭐️ Data Science разбор реальной задачи с собеседования. Прогнозирование оттока клиентов.
▪Смотреть
▪Данные
▪Ноутбук
@machinelearning_ru
📌Определение стоимости автомобилей с помощью ML
Разбор реальной задачи ML по определению цены авто. В ходе используются библиотеки pandas, numpy, matplotlib, seaborn, sklearn.
Неплохая идея для пет-проекта, да и в целом, это практическое задание поможет в подготовке к собеседованию
▶️ Туториал
🖥 GitHub проекта
@machinelearning_ru
Что будет, если взять старый добрый Comic Con и приправить его карьерой в IT? Получится фестиваль Young Con!
Young Con — событие для всех, кто интересуется IT и хочет развиваться в профессии. Если коротко: это такой мультиверс Яндекса с девятью тематическими «мирами», которым соответствуют отдельные сервисы, команды и технологии.
Участники фестиваля смогут вдохновиться лекциями и советами опытных разработчиков, выбрать команду и сервис для старта или развития своей карьеры (прямо на месте будет возможность пройти экспресс-собеседование). Закроют фестиваль выступления The Hatters и группы ХЛЕБ, а также яркий финал турнира по программированию среди студентов «Баттл вузов». Команда-победитель разделит между собой 1 млн рублей (рега тут).
Фестиваль пройдет 27 июня в московском Live Arena. Чтобы попасть на фестиваль офлайн, участникам нужно написать мотивационное письмо, почему вы хотите на Young Con. А разработчикам, которые готовы пройти собеседование на фесте и попасть на стажировку в компании, — решить техническое задание до 14 июня. Все подробности и регистрация здесь.
🤯 GUI для файнтюнига Llama-3 на бесплатном процессоре T4!
👉 𝐋𝐋𝐚𝐌𝐀 𝐅𝐚𝐜𝐭𝐨𝐫𝐲
🚀 Две настройки Llama-3-fine с использованием LLaMA Factory уже доступны на huggingface.
🤗 Spaces: https://huggingface.co/spaces/hiyouga/LLaMA-Board
⚡️ Demo: https://github.com/hiyouga/LLaMA-Factory?tab=readme-ov-file#train-with-llama-board-gui-powered-by-gradio
@machinelearning_ru
☁️ Stable Diffusion запуск в облаке.
▪ Видео
@machinelearning_ru
DeepMind AlphaFold 3 - This Will Change Everything!
https://www.youtube.com/watch?v=Mz7Qp73lj9o
@machinelearning_ru
25 Статей, которые полностью изменили компьютерный мир.
@machinelearning_ru
🖥 ImageInWords: Unlocking Hyper-Detailed Image Descriptions
Google представили ImageInWords: Инструмент для получения к сверхдетализированных описаний изображений.
Это тщательно разработанная система аннотаций " human-in-the-loop" для генерации полных описаний изображений и большой новый датасет.
▪проект: https://google.github.io/imageinwords/
▪abs: https://arxiv.org/abs/2405.02793
@machinelearning_ru
⭐️ Autonomous RAG
Как выполнять автономную генерацию данных с расширенным поиском с помощью GPT 4.
Создание Auto-RAG системы, в которой LLM будет автоматически извлекать необходимые данные из разных источников.
🔎 Пользователь задает вопрос.
🤔 LLM решает, следует ли искать в своей памяти, Интернете или выполнить вызов API.
✍️ LLM отвечает с учетом контекста.
Код: https://git.new/auto-rag
@machinelearning_ru
🌟 Anthropic выпустила приложение с Claude для iPhone
Основанная бывшими сотрудниками OpenAI компания Anthropic активно продвигает своего чат-бота Claude и выпустил мобильное приложение для iPhone, которое уже доступно как для бесплатных, так и для платных пользователей Claude. Мобильное приложение Claude выступает в роли чат-бота, а также может анализировать изображения пользователей. Например, распознавать виды птиц на фотографиях и многое другое.
Благодаря приложению можно общаться с Claude в любое время и в любом месте, кроме того оно синхронизируется с веб-версией, так что диалоги сохраняются.
▶️ Подробнее в анонсе от Anthropic
@machinelearning_ru
👉 Лучшие материалы по машинному обучению с помощью Python
В этом списке представлено 880 интерсных проектов с открытым исходным кодом по визуализации данных, NLP, временным рядам, машинному обучению, конвейерам данных, обучению с подкреплением, рекомендательным системам и многому другому.
🔗 https://github.com/ml-tooling/best-of-ml-python
@machinelearning_ru
🌟 Nvidia добавила в ChatRTX голосовой ввод, поддержку Gemma и поиск фотографии
Компания Nvidia обновила своё приложение ChatRTX для запуска локальных ИИ-чат-ботов, добавив поддержку новых ИИ-моделей.
Изначально приложение предлагало поддержку ИИ-моделей Mistral и Llama 2. Обновлённая версия получила поддержку моделей Gemma от Google, ChatGLM3, а также CLIP от OpenAI, упрощающей поиск фотографий и изображений.
▶️Скачать ChatRTX можно с официального сайта Nvidia.
@machinelearning_ru
🔥 Если вы хотите погрузиться в компьютерное зрение, вот ваш шанс.
Крутые спецы из сообщества huggingface объединились, чтобы создать курс, разработанный сообществом для всех желающих.
🖥️ Что в курсе:
🔹 Основы компьютерного зрения
🔹 Сверточные нейронные сети
🔹 Трансформеры
Генеративные Модели
🔹 Обработка видео
🔹 3D , отображение сцены и реконструкции
🔹 Этика и CV
и многое другое...
📚 Курс
@machinelearning_ru
MIT Introduction to Deep Learning | 6.S191
https://www.youtube.com/watch?v=ErnWZxJovaM
@machinelearning_ru
🔥 Practical_RL
В этом репозитории вы найдете открытый курс по обучению с подкреплением.
Этот курс уже преподается на кампусе ВШЭ и YSDA.
https://github.com/yandexdataschool/Practical_RL
@machinelearning_ru
⚡️ Awesome Multimodal Machine Learning
Исследовательские работы по мультимодальному машинному обучению.
Помимо статей, вы также найдете наборы данных, семинары, учебные пособия и курсы по мультимодальному ML.
🔗 Github
@machinelearning_ru
⚡️ Google представил ИИ-помощника программиста — Gemini Code Assist
🟡Недавно Google на мероприятии Cloud Next представила ИИ-систему Gemini Code Assist для помощи в написании кода с функцией завершения строк.
🟡Code Assist является прямым конкурентом Copilot Enterprise от GitHub. Он будет доступен в виде плагинов для популярных редакторов кода, таких как VS Code и IDE от JetBrains. Code Assist получил поддержку Gemini 1.5 Pro с огромным контекстным окном в миллион токенов.
🟡Как и GitHub Enterprise, Code Assist можно кастомизировать под внутреннюю кодовую базу компании. Кроме того, Code Assist поддерживает код в различных репозиториях, например, GitLab, GitHub и BitBucket, а также проекты, распределенные по нескольким платформам.
▶️ Gemini Code Assist уже можно попробовать в VS Code и IDE от JetBrains
@machinelearning_ru
🙌 🦥 Uncloth -сейчас в тренде на Github!
Unsloth Позволяет запускать модели Mistral, Gemma, Llama в 2-5 раз быстрее при меньшем потреблении памяти в 80%!
Все ноутбуки удобны для начинающих! Добавьте свой датасет, нажмите "Запустить", и вы получите модель, которую можно экспортировать в GGUF, vLLM или загрузить на Hugging Face.
Если вы хотите ускорить свою LLM рекомендую попробовать☺️
▪️Github
▪️Docs
@machinelearning_ru
Уже попробовали Phi-3?
Возможно, этот пост поможет вам получить больше информации о модели, которая поможет вам начать работу с Phi-3.
Phi-3-mini (3,8B) уже превосходит Llama3-8b в 13 из 19 стандартных бенчмарках !
🐅 Phi-3-Mini-4K-Instruct - это небольшая открытая модель 3.8B, которая достигает SOTA в своем классе.
Модель была обучена на 3,3 Т токенах, которые содержат:
✅ высококачественные открытые данные
✅ синтетические данные
✅ высококачественные данные с логическим обоснованием
Phi-3 Mini 4k и 128k доступны на hugging hub.
✅ Оптимизация ONNX для обеих мини-версий
✅ Кроссплатформенная поддержка процессоров, GPU и мобильных устройств
✅ Простая интеграция в трансформеры
🖇 Коллекция моделей Phi-3: https://huggingface.co/collections/microsoft/phi-3-6626e15e9585a200d2d761e3
✨ Карточка модели на HF содержит подробную документацию по данным, архитектуре, контрольным точкам, принципам использования ИИ и содержит примеры работы, чтобы помочь разработчикам понять и оценить качество моделей HF. 🤗
Модель для mini-128k: https://huggingface.co/microsoft/Phi-3-mini-128k-instruct
@machinelearning_ru
Участвуйте в отборе статей в научный журнал международной конференции по искусственному интеллекту AI Journey и получите возможность выиграть 1 млн рублей
Стартовал открытый отбор научных статей по AI/ML для публикации в журнале «Доклады Российской академии наук. Математика, информатика, процессы управления» и его англоязычной версии Doklady Mathematics.
Специальное издание выйдет в рамках ежегодной международной конференции по искусственному интеллекту AI Journey 2024, а автора лучшей статьи ждет приз — 1 млн рублей!
Статья может быть написана как на русском, так и на английском языке, но обязательно должна содержать только ранее не опубликованные сведения.
Узнать подробности и подать заявку можно до 20 августа на сайте мероприятия.
Не упустите уникальную возможность презентовать свои исследования перед научным сообществом на площадке конференции AI Journey 2024, а заодно получить денежное вознаграждение!
@machinelearning_ru