ai_machinelearning_big_data | Технологии

Telegram-канал ai_machinelearning_big_data - Machinelearning

27349

Самая актуальная информация из мира ML, Нейронных сетей,DI По всем вопросам- @haarrp @itchannels_telegram - 🔥 best it channels @pythonl - 🐍 @machinee_learning -chat @ArtificialIntelligencedl - AI @datascienceiot - ml 📚 @machinelearning_ru ml

Подписаться на канал

Machinelearning

⚡️TokenFlow: Consistent Diffusion Features for Consistent Video Editing

Framework that harnesses the power of a text-to-image diffusion model for the task of text-driven video editing.

TokenFlow - это фреймворк, позволяющий последовательно редактировать видео, используя предварительно обученную модель диффузии текста в изображение, без дополнительного обучения и настройки.

Нейросеть
генерирует анимации высокого качества, сохраняя расположение и динамику из исходого ролика.

🖥 Github: https://github.com/omerbt/TokenFlow

🤗HF: https://huggingface.co/spaces/weizmannscience/tokenflow

📕 Paper: https://arxiv.org/abs/2307.10373

Project: https://diffusion-tokenflow.github.io/


ai_machinelearning_big_data?boost - boost to see premium content

Читать полностью…

Machinelearning

🏆 LongLoRA: Efficient Fine-tuning of Long-Context Large Language Models

13B and 70B 32k models with the supervised fine-tuning, which is feasible for long context

LongLoRA - эффективный подход к файнтюнингу, позволяющий расширить размер контекста предварительно обученных больших языковых моделей (БЯМ) при ограниченных вычислительных затратах.

🖥 Github: https://github.com/dvlab-research/longlora

📕 Paper: https://arxiv.org/abs/2309.12307v1

⭐️ Demo: https://b3cfcf9e79ff42df5f.gradio.live/

Dataset: https://paperswithcode.com/dataset/pg-19

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🚀Break-A-Scene: Extracting Multiple Concepts from a Single Image

Given method can learn a distinct token for each concept, and use natural language guidance to re-synthesize the individual concepts or combinations of them in various contexts

Новый Фреймворк от Google для декомпозиции сцен из изобра
жений .

🖥 Github: https://github.com/google/break-a-scene

📕 Paper: https://arxiv.org/abs/2305.16311

Project: https://omriavrahami.com/break-a-scene/

📌 Video: https://www.youtube.com/watch?v=-9EA-BhizgM

ai_machinelearning_big_data

Читать полностью…

Machinelearning

😠 GPTFUZZER : Red Teaming Large Language Models with Auto-Generated Jailbreak Prompts

Fuzzer maintains over 90% attack success rate against ChatGPT and Llama-2 models.

Новый фреймворк для фаззинга , созданный на основе фреймворка AFL. Вместо ручного проектирования fuzzer автоматизирует генерацию шаблонов джейлбрейка для LLM.


🖥 Github: https://github.com/sherdencooper/gptfuzz

📕 Paper: https://arxiv.org/abs/2309.10253v1

Dataset: https://sites.google.com/view/llm-jailbreak-study

ai_machinelearning_big_data

Читать полностью…

Machinelearning

📊 PAMS: Platform for Artificial Market Simulations

Artificial market simulation is a multi-agent simulation and run virtual markets on your computer.

Имитация искусственных рынков - это многоагентное моделирование и запуск виртуальных рынков на вашем компьютере. На искусственных рынках существуют виртуальные рынки и виртуальные агенты, имитирующие реальных трейдеров.

С помощью искусственного моделирования рынков мы можем анализировать механизмы того, что происходит на реальных рынках.

$ pip install pams

🖥 Github: https://github.com/masanorihirano/pams

📕 Paper: https://arxiv.org/abs/2309.10729v1

Docs: https://pams.hirano.dev/

ai_machinelearning_big_data

Читать полностью…

Machinelearning

Открылась регистрация на международный чемпионат по программированию Yandex Cup с призовым фондом в 7,8 млн рублей

Участники могут выбрать среди шести направлений: аналитика, фронтенд- и бэкенд-разработка, мобильная разработка, машинное обучение и «Алгоритм», посвящённый спортивному программированию — последний пройдёт не только на русском, но и английском языке.

Задания Yandex Cup составляют сотрудники Яндекса на основе тех задач, с которыми сталкиваются в повседневной работе.
При этом чемпионат посетит большое количество опытных разработчиков, а участвовать могут разработчики разного уровня — участвовать могут как студенты, так и сеньоры.

ai_machinelearning_big_data

Читать полностью…

Machinelearning

⛓️🛠️ ChainForge: A Visual Toolkit for Prompt Engineering and LLM Hypothesis Testing

Среда визуального программирования с открытым исходным кодом для создания промптов, проведения экспериментов и оперативной оценки LLM.


pip install chainforge

🖥 Github: https://github.com/ianarawjo/ChainForge

⭐️ Project: https://chainforge.ai

📕 Paper: https://arxiv.org/abs/2309.09128v1

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🦙 LLaVA: Large Language and Vision Assistant

LLaVA - новая комплексная мультимодальная модель, которая подробно объяснит любое изображение

git clone https://github.com/haotian-liu/LLaVA.git
cd LLaVA


🖥 Github: https://github.com/haotian-liu/LLaVA

📕 Paper: https://arxiv.org/pdf/2309.09958v1.pdf

⭐️ Datasets: https://paperswithcode.com/dataset/mmlu

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🚀Breathing New Life into 3D Assets with Generative Repainting

Новая модель. которая переносит возможности генеративных моделей 2D-изображений, таких как Stable Diffusion, в 3D. Проект позволяет получить яркие генерации 3D-объектов в различных категориях форм.

🖥 Github: https://github.com/kongdai123/repainting_3d_assets

☑️ Demo: https://www.obukhov.ai/repainting_3d_assets

🖥 Colab: https://colab.research.google.com/drive/18mDpuYO5TuI6tSkQk9ls2rS9sciNpR-c?usp=sharing

📕 Paper: https://arxiv.org/abs/2309.08523v1

⭐️ Datasets: https://paperswithcode.com/dataset/shapenet

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🔥Free Certification Courses from Microsoft to try in 2023:

Бесплатные сертификационные курсы от Microsoft, которые можно пройти в 2023 году.

1. Get started with Microsoft data analytics
https://learn.microsoft.com/en-us/training/paths/data-analytics-microsoft

2. Prepare data for analysis with Power BI

https://learn.microsoft.com/en-us/training/paths/prepare-data-power-bi

3. Model data with Power BI
https://learn.microsoft.com/en-us/training/paths/model-data-power-bi

4. Build Power BI visuals and reports
https://learn.microsoft.com/en-us/training/paths/build-power-bi-visuals-reports

5. Data analysis in Power BI
https://coursya.com/product/microsoft-power-bi-data-analyst

6. Visualize data in Power BI
https://coursya.com/product/build-power-bi-visuals-and-reports-training

7. Model data in Power BI
https://coursya.com/product/power-bi-for-beginners-designing-a-data-model

8. Prepare data for analysis
https://coursya.com/product/prepare-data-for-analysis-training

9. Get started with Microsoft data analytics
https://coursya.com/product/get-started-with-microsoft-data-analytics-training

10. Microsoft Certified: Power BI Data Analyst Associate
https://coursya.com/product/microsoft-certified-power-bi-data-analyst-associate-certifications

ai_machinelearning_big_data

Читать полностью…

Machinelearning

Как найти себя в IT, если вы ещё не выбрали профессию?

В Яндекс Практикуме можно пройти профориентационные тесты и начать IT-карьеру. В этом вам поможет большой карьерный центр: 200+ карьерных экспертов и 850 партнёрских вакансий только за 2023 год.

Истории наших выпускников показывают, что каждый может сменить профессию: из медсестры — в тестировщицы, из полицейского — в разработчика, из разнорабочего — в программиста. Больше 10 000 выпускников уже нашли работу — у вас тоже может получиться.

Найдите своё место в IT и трудоустраивайтесь поудобнее.

Реклама. Рекламодатель ООО "Яндекс" ИНН 7736207543

Читать полностью…

Machinelearning

✏️ Модель для генерации субтитров, созданная Яндекс Браузером

Итак, Яндекс запустил внутри браузера новую нейросеть: она создаёт субтитры к любым русскоязычным видео на любом сайте. Субтитры работают даже для тех роликов, которые доступны после авторизации или загружены в облачные хранилища.

Нейросеть стала потреблять в 5 раз меньше оперативной памяти: оптимизация буферов и моделей позволили дойти до отметки в 150 Мб вместо 800 Мб. Для этого разработчики уменьшали накапливающиеся буферы, меняли архитектуру модели и перенастраивали процесс декодирования.

За основу взята архитектура VGGTransformer. Нейросеть обучили на блочное применение — это когда предсказание работает с помощью скользящего окна со сдвигом.

Подробнее про генерацию субтитров можно почитать в статье на Хабре.

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🚩 Towards the TopMost: A Topic Modeling System Toolkit

The highly cohesive and decoupled modular design of TopMost enables quick utilization, fair comparisons, and flexible extensions of different topic models.

TopMost обеспечивает полный жизненный цикл тематического моделирования, включая предварительную обработку данных, обучение модели, тестирование и оценку. Он охватывает наиболее популярные сценарии тематического моделирования, такие как статическое, динамическое, иерархическое и межъязыковое тематическое моделирование.

$ pip install topmost

🖥 Github: https://github.com/bobxwu/topmost

📕 Paper: https://arxiv.org/abs/2309.06908v1

Docs: https://topmost.readthedocs.io/

⭐️ Dataset: https://paperswithcode.com/dataset/imdb-movie-reviews

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🔥 Introducing Würstchen: Fast Diffusion for Image Generation

Diffusion model, whose text-conditional component works in a highly compressed latent space of images

Würstchen - это диффузионная модель, которой работает в сильно сжатом латентном пространстве изображений.

Почему это важно? Сжатие данных позволяет на порядки снизить вычислительные затраты как на обучение, так и на вывод модели.

Обучение на 1024×1024 изображениях гораздо затратное, чем на 32×32. Обычно в других моделях используется сравнительно небольшое сжатие, в пределах 4x - 8x пространственного сжатия.

Благодаря новой архитектуре достигается 42-кратное пространственное сжатие!

🤗 HF: https://huggingface.co/blog/wuertschen

📝 Paper: https://arxiv.org/abs/2306.00637

📕 Docs: hhttps://huggingface.co/docs/diffusers/main/en/api/pipelines/wuerstchen

🚀 Demo: https://huggingface.co/spaces/warp-ai/Wuerstchen

ai_machinelearning_big_data

Читать полностью…

Machinelearning

Присоединяйтесь к вебинару livecoding и обучайте модель Machine Learning в режиме реального времени.

Когда: 15 сентября в 19:00.
Тема: "Прогнозирование цен на автомобили с помощью машинного обучения”
Длительность: около 2 часов.
Кто обучает: эксперт в Data Science с 10-летним практическим опытом

Что будет на вебинаре:
✅Пошаговая разборка ML-процесса
✅Практические задания с доступом к реальным данным и среде
✅Интерактивное обучение и обсуждение

Вместе мы сделаем сложное простым и достигнем результатов с минимальными усилиями 💪


Бесплатное участие только для первых 30 записавшихся человек.

👉 Записаться на вебинар

Реклама: ИП Кравченко Николай Васильевич LjN8KYXZ9

Читать полностью…

Machinelearning

🚀 Gold-YOLO: Efficient Object Detector via Gather-and-Distribute Mechanism

Gold-YOLO, which boosts the multi-scale feature fusion capabilities and achieves an ideal balance between latency and accuracy across all model scales.

Модель Gold-YOLO-N достигает выдающегося результата в обнаружении объектов и превосходит предыдущую модель SOTA YOLOv6-3.0-N с аналогичным FPS.

🖥 Github: https://github.com/huawei-noah/Efficient-Computing/tree/master/Detection/Gold-YOLO

📕 Paper: https://arxiv.org/abs/2309.11331v2

Dataset: https://paperswithcode.com/dataset/coco

ai_machinelearning_big_data?boost - boost to see premium content

Читать полностью…

Machinelearning

Примите участие в AI Challenge - международном конкурсе по искусственному интеллекту для молодежи от Сбера

Это отличная возможность для школьников и выпускников до 18 лет получить знания и навыки в области искусственного интеллекта, а также приобрести друзей со всего мира.

Участники будут соревноваться в пяти направлениях: от медицины до креативных индустрий.

Отбор пройдет в 4 этапа: регистрация, командная работа, финальный этап с защитой перед экспертами и награждение. Призовой фонд разделят победители в каждом направлении.

Зарегистрироваться можно прямо сейчас на сайте конкурса.

Читать полностью…

Machinelearning

🔥 Мы в Yandex for Developers запускаем четыре новых канала для разработчиков

Теперь Yandex for — это целая семья телеграм-каналов по разным направлениям: фронтенд, бэкенд, мобильная разработка и ML.

В каждом из них мы будем рассказывать всё о жизни определённого комьюнити инженеров внутри Яндекса — начиная с анонсов всех стековых мероприятий и заканчивая техническими подборками от разработчиков, интервью с инженерами и полезной информацией по найму. А в этом большом телеграм-канале мы продолжим рассказывать про главные события Яндекса для разработчиков, уже не боясь немножечко поднадоесть вам.

Давайте обсуждать технологии, знакомиться и развивать сообщество инженеров:

➡️ Yandex for Mobile

➡️ Yandex for Frontend

➡️ Yandex for Backend

➡️ Yandex for ML

В общем, переходите на наши каналы — всё самое интересное только начинается!

Подписывайтесь 👉 @Yandex4Developers

Реклама. ООО "Яндекс". erid: 2VtzqvyJJuX

Читать полностью…

Machinelearning

❗️ Как стать высокооплачиваемым специалистом в ML?

👉 Совершенствуй мастерство ML в сообществе единомышленников на открытом уроке 26 сентября в 20:00 мск —  «Алгоритм PCA как один из популярных Unsupervised алгоритмов ML»

🔹 Зачастую нам приходится проецировать многомерные данные на плоскость либо в пространство меньшей размерности. На открытом уроке вы узнаете, что из себя представляет задача снижения размерности

📌 Результаты урока:
Вы изучите основные техники снижения размерности и изучите метод PCA

👉 РЕГИСТРАЦИЯ
https://otus.pw/2w31/

Реклама. ООО «Отус онлайн-образование», ОГРН 1177746618576, www.otus.ru

Реклама. ООО "ОТУС ОНЛАЙН-ОБРАЗОВАНИЕ". ИНН 9705100963. erid: LjN8KLmha

Читать полностью…

Machinelearning

dall-e-3 is here !

https://openai.com/dall-e-3

Читать полностью…

Machinelearning

Правила и стратегии для обеспечения точных и надежных данных
X5 Tech проводит Data Quality Meetup

На митапе 27 сентября расскажут о том, как измеряется качество данных, для чего нужен этот показатель, почему специализированный инструмент Ataccama ONE недостаточно специализирован для нужд компании и как его дорабатывают.

🔹 В онлайн формате выступят спикеры X5 Tech: ведущие менеджеры по качеству данных Наталья Цой и Анастасия Щедрякова, а также Лилия Скляр, руководитель направления и по совместительству модератор события.

🔔 Старт в 18:00

Регистрация и подробности тут
Участие бесплатное

Реклама. ООО "Корпоративный центр ИКС 5", ИНН 7728632689 , erid: LjN8KSdBV

Читать полностью…

Machinelearning

Команда VK Cloud недавно запустила новый канал о работе с данными — Данные на стероидах.

В нем ребята публикуют подборки интересного контента по темам Data science, ML и Big Data. Например, рассказывают, про планирование и жизненный цикл ML-проектов, из-за чего происходят и как избежать утечек при работе с ML, или как создавать футуристичные графики с помощью Python.

Помимо прочего, в канале много полезной информации о работе с данными, архитектуре дата-решений и новостей российского и международного Data-сообщества.

👉🏻 Подписывайтесь на канал Данные на стероидах, будет интересно!

Читать полностью…

Machinelearning

SmartDev 2023 — большая конференция про технологии от Сбера

21 сентября в кинотеатре «Октябрь» пройдет технологическая конференция SmartDev 2023, организованная Сбером. На одной площадке соберутся ведущие инженеры и разработчики из Сбера, VK, Яндекса, Kaspersky и других компаний, чтобы обменяться опытом создания лучших технологических решений в мире.

Основные темы конференции:
– Машинное обучение и искусственный интеллект
– Архитектура программных решений
– DevOps
– Работа с большими данными
– Безопасность приложений
– Инновации и стратегии в разработке ПО

Помимо этого впервые в России можно услышать выступление генерального директора Gitee, китайского аналога GitHub.Yong Xu.
Также участники конференции смогут задать вопросы создателям нашумевших проектов от Сбера — сервиса GigaChat и нейросети Kandinsky.

Конференция соберёт 1500 участников в офлайне и несколько тысяч зрителей в онлайне.
Участие бесплатное, подробности и регистрация — на сайте конференции.

Читать полностью…

Machinelearning

🫦 HDTR: A Real-Time High-Definition Teeth Restoration Network for Arbitrary Talking Face Generation Methods

Talking Face Generation - новый проект для реконструкции движений лица для достижения высокой естественности движений губ из аудио.


🖥 Github: https://github.com/yylgoodlucky/HDTR-Net

📕 Paper: https://arxiv.org/abs/2309.07495v1

⭐️ Datasets: https://paperswithcode.com/dataset/lrs2

ai_machinelearning_big_data

Читать полностью…

Machinelearning

💥 MMICL: Empowering Vision-language Model with Multi-Modal In-Context Learning

MMICL is a multimodal vision-language model with the ability to analyze and understand multiple images, as well as follow instructions.

MMICL - это хорошо продуманная модель
с датасетом, которая позволяет беспрепятственно интегрировать визуальный и текстовый контекст в чередующемся виде для разработки
крупных мультимодальных моделей.

🖥 Github: https://github.com/haozhezhao/mic

📕 Paper: https://arxiv.org/abs/2309.07915v1

⭐️ Datasets: https://paperswithcode.com/dataset/mmbench
ai_machinelearning_big_data

Читать полностью…

Machinelearning

FlagEmbedding

FlagEmbedding can map any text to a low-dimensional dense vector which can be used for tasks like retrieval, classification, clustering, or semantic search. And it also can be used in vector databases for LLMs.

FlagEmbedding позволяет преобразовать любой текст в плотный низкоразмерный вектор, который может быть использован для решения таких задач, как поиск, классификация, кластеризация или семантический поиск. Кроме того, он может быть использован в векторных базах данных для LLM.


pip install -U FlagEmbedding

🖥 Github: https://github.com/flagopen/flagembedding

📕 Paper: https://arxiv.org/pdf/2309.07597v1.pdf

⭐️ Datasets: https://paperswithcode.com/dataset/beir

ai_machinelearning_big_data

Читать полностью…

Machinelearning

📂 An Open-source Framework for Autonomous Language Agents

Agents is carefully engineered to support important features including planning, memory, tool usage, multi-agent communication, and fine-grained symbolic control.

Agents - это библиотека/фреймворк с открытым исходным кодом для создания автономных языковых агентов.

Библиотека тщательно продумана и поддерживает такие важные функции, как долгую краткосрочную память , использование продвинутых ии-инструментов, веб-навигацию, мультиагентное взаимодействие, а также совершенно новые возможности, включая взаимодействие человека и агента и символьное управление.

pip install ai-agents

🖥 Github: https://github.com/aiwaves-cn/agents

📕 Paper: https://arxiv.org/pdf/2309.07870.pdf

Demo: https://github.com/aiwaves-cn/agents#web-demos

⭐️ Project: http://www.aiwaves-agents.com/

ai_machinelearning_big_data

Читать полностью…

Machinelearning

Приглашаем на Yandex Scale 2023!

Ежегодная и самая масштабная конференция Yandex Cloud уже в пятый раз соберет экспертов индустрии. Эксперты компании поделятся новостями платформы, расскажут о новых сервисах, а также обсудят будущее облачных технологий.

Что вас ждет в этом году:

🚀6 актуальных тематических треков: Data Platform, Infra + K8s, Security, Digital Workplace, Severless, ML;
🔊главные новости платформы и индустрии;
🎙30+ выступлений экспертов, кейсы клиентов и партнеров;
🏢9 стендов на офлайн-выставке;
🤝Нетворкинг: не упустите возможность встретиться с руководителями разработки и задать им все интересующие вас вопросы.

📅 В этом году конференция будет проходить два дня:
25 сентября – онлайн: открытие;
26 сентября – онлайн и офлайн: главный доклад, основная программа и выставка.

Регистрируйтесь по ссылке.

Реклама. ООО "Яндекс" ИНН 7736207543

Читать полностью…

Machinelearning

🗣Project NN-Pytorch-scripts

This is a set of Python / Pytorch scripts and tools for various speech-processing projects.

Набор скриптов и инструментов на языке Python / Pytorch для различных проектов по обработке речи.


git clone --depth 1 https://github.com/nii-yamagishilab/project-NN-Pytorch-scripts.git

🖥 Github: https://github.com/nii-yamagishilab/project-NN-Pytorch-scripts

📕 Paper: https://arxiv.org/pdf/2309.06014v1.pdf

⭐️ Tasks: https://paperswithcode.com/task/speech-synthesis

ai_machinelearning_big_data

Читать полностью…

Machinelearning

🔥 Free Certification Courses from Google to try in 2023.

Бесплатные сертификационные курсы от Google, для аналитиков, которые стоит пройти в 2023 году.

1. Basics of Machine Learning
https://grow.google/intl/en_in/

2. Machine Learning Crash Course
https://coursya.com/product/machine-learning-crash-course

3. Project Execution: Running the Project
https://coursera.org/learn/project-execution-google

4. Foundations of Project Management
https://coursera.org/learn/project-management-foundations

5. Project Initiation: Starting a Successful Project
https://coursera.org/learn/project-initiation-google

6. Project Planning: Putting It All Together
https://coursera.org/learn/project-planning-google

7. Google Analytics for Power Users
https://coursya.com/product/google-analytics-certification-coursya

8. Fundamentals of digital marketing
https://skillshop.exceedlms.com/student/collection/654330-digital-marketing?locale=en-GB

9. Python Basics for Data Analysis
https://coursya.com/product/learn-python-basics-for-data-analysis

10. Data Science Foundations
https://grow.google/intl/en_in/

11. Advanced Google Analytics
https://coursera.org/professional-certificates/google-data-analytics

12. Google Cloud Computing Foundations:
https://cloudskillsboost.google/course_templates/153

13. Data, ML, and AI in Google Cloud
https://coursya.com/product/google-cloud-computing-foundations-data-ml-and-ai-in-google-cloud-google-cloud-skills-boost

14. Agile Project Management
https://coursera.org/learn/agile-project-management


15. Google Project Management
https://coursera.org/professional-certificates/google-project-management

ai_machinelearning_big_data

Читать полностью…
Подписаться на канал