3066
@Futuris - канал о технологиях, будущем и не только. Contact @antonod
🔥Международная команда исследователей из различных университетов представила AudioGPT: многофункциональную AI-систему, соединяющую ChatGPT с аудио🎙
AudioGPT способен обрабатывать и генерировать различные виды аудиоконтента, включая:
Речь: модель может создавать синтезированную речь с заданными параметрами, такими как интонация, тембр и акцент. Это позволяет генерировать естественные и выразительные устные ответы на вопросы пользователей.
Музыка: модель может анализировать и создавать музыкальные композиции или мелодии, учитывая стиль, жанр и структуру.
Звуки: AudioGPT может распознавать и создавать разнообразные звуки, такие как звуки природы, городские шумы или звуковые эффекты, которые могут быть использованы в мультимедийных проектах или для поддержания общения с пользователем.
Talking heads (говорящие головы): модель может анализировать и создавать видео с говорящими головами, которые синхронизированы с генерируемой речью. Это позволяет создавать виртуальных персонажей, способных общаться с пользователем в видеоформате.
Процесс AudioGPT состоит из четырех этапов:
Трансформация модальности: преобразование речи в текст для более эффективного общения между моделями.
Анализ задач: определение намерений пользователя.
Назначение модели: выбор аудио-моделей для понимания и генерации речи, музыки и звуков.
Дизайн ответа: генерация и предоставление пользователю окончательного ответа после обработки аудио-моделями основы.
Таким образом, AudioGPT может создавать разнообразный аудиоконтент для различных приложений и сценариев использования, таких как виртуальные ассистенты, музыкальное творчество, создание звуковых эффектов и мультимедийное общение.
Ждём новых крутых продуктов на основе этой модельки✨, а пока Github проекта
И пощупать на Huggingface
Небольшая подборка свежих новостей из мира технологий и науки:
😮 IBM собирается заменить 30% неклиентоориентированных должностей (около 7800 рабочих мест) на искусственный интеллект в течение пяти лет. Первыми задачами для AI станут HR-функции. Работа с клиентами и разработка ПО останутся в руках людей. Такое решение говорит о серьезной угрозе для рынка труда из-за AI.
🤖 Amazon работает над улучшением своего голосового ассистента Alexa с помощью крупной языковой модели, чтобы сделать его более универсальным и способным выполнять сложные задачи, заявил генеральный директор компании Энди Джесси. Ожидается, что благодаря новой модели Alexa станет лучшим персональным помощником в мире, обеспечивая более глубокое понимание человеческого общения и выполняя более сложные задачи.
🧠 Ученые из Университета Мичигана обнаружили всплеск активности гамма-волн в мозгах двух умирающих пациентов. Этот всплеск был обнаружен в "горячей зоне" мозга, связанной с нейронными коррелятами сознания. Подобная активность была замечена у людей во время сновидений и у пациентов с эпилепсией, испытывающих визуальные галлюцинации и внетелесные переживания. Найденные результаты могут дать больше информации о сознании и последних моментах жизни.
🧪 Ученые разработали декодер мыслей на основе искусственного интеллекта, который может переводить человеческие мысли в текст с помощью функциональной магниторезонансной томографии (fMRI). Технология может помочь людям с неврологическими заболеваниями, влияющими на речь, общаться с внешним миром. Однако ученые предупреждают о возможных негативных последствиях, таких как слежка и нарушение умственной приватности🤯
"Крёстный отец ИИ" Джеффри Хинтон ушел из Google, выражая сожаления и опасения относительно работы всей своей жизни. Хинтон, лауреат премии Тьюринга 2018 года, решил свободно говорить о рисках искусственного интеллекта после ухода из компании. Он признается, что дальнейшее развитие ИИ может иметь негативные последствия, такие как распространение дезинформации и потеря рабочих мест. В своем интервью The New York Times Хинтон также выразил опасения о возможном будущем, в котором ИИ станет умнее людей🤷♂️
https://www.theverge.com/2023/5/1/23706311/hinton-godfather-of-ai-threats-fears-warnings
Парень завёл себе виртуальную GPT-girlfriend. Немного крипово😬, я все-таки за реальное общение👫
Взял отсюда
OpenAI представили Wolfram ChatGPT Plugin Kit, набор инструментов для создания плагинов к ChatGPT, разработанный в сотрудничестве с Wolfram. Пользователи могут создавать собственные плагины для выполнения специфических вычислений или доступа к данным и сервисам, доступным только на их компьютере или системе. Благодаря инструментарию Wolfram Language, создание и внедрение базового плагина ChatGPT станет возможным менее чем за минуту✨
Примеры из объёмной статьи демонстрируют различные возможности и сценарии использования, такие как отображение изображений, отправка сообщений, извлечение персональных данных, взаимодействие с камерой компьютера, создание и управление блокнотами, просмотр файлов, планирование задач и воспроизведение музыки.
https://writings.stephenwolfram.com/2023/04/instant-plugins-for-chatgpt-introducing-the-wolfram-chatgpt-plugin-kit/
Тоже самое запилили в вечный Скайрим, так и 6 часть the elder scrolls ждать не придётся, если у каждого npc будет собственный характер и память и наконец-то можно будет узнать, что случилось с охранником, которому однажды прострелили колено🧙♂
Читать полностью…
Ради эксперимента запустил тут канал с ChatGPT 3.5 в главной роли (/channel/ChatGPT4Fun), который с помощью модельки Text-DaVinci-003 постит рандомные иногда-забавные вещи (в основном галлюцинирует🥴). Изначально хотел создать бота для коротких новостных обзоров, но из-за стоимости токенов отказался. (может потом добавлю этот функционал, когда разберусь, как заранее сокращать новости без OpenAI) Бот работает через API OpenAI и скрипт на Python. Стоимость токенов: $0.02 за 1к (750 английских слов или 100 русских). Заходите, надеюсь получится посмеяться, если что постараюсь дальше подкручивать промпт и экспериментировать🤓 Посты будут каждые 30 минут (пока что раз в 10 минут).
Читать полностью…
⚡️Hugging Face выпустил альтернативу ChatGPT, под названием HuggingChat. Этот чат-бот может выполнять задачи, аналогичные ChatGPT, и доступен для тестирования через веб-интерфейс и интеграцию с приложениями через API Hugging Face. Модель разработана проектом Open Assistant с целью создания универсального помощника с открытым исходным кодом.
Однако у HuggingChat еще есть над чем работать. Как и другие модели, генерирующие текст, HuggingChat может быстро "сходить с рельсов", в зависимости от заданных вопросов.
В любом случае, конкуренция приведет к усовершенствованию текущих моделей, а открытость является большим плюсом HuggingChat🤓
Пишут, что Сбербанк анонсировал выпуск чат бота GigaChat, предназначенного для конкуренции с ChatGPT, в режиме тестирования по приглашениям. Таким образом, российский банк присоединяется к гонке интеллектуальных чат-ботов.
Сбербанк заявил, что GigaChat отличается от других иностранных нейронных сетей своей способностью более интеллектуально общаться на русском языке.
Думаю, это, конечно же, будет самый открытый и беспристрастный чат бот из всех (нет)🙃
Конкуренция прекрасна✨
Сегодня Google обновил свой сервис Bard, добавив возможность помочь пользователям в задачах программирования и разработки ПО. Теперь Bard умеет генерировать код, отлаживать его и объяснять его суть.
Эта функция стала доступна для более чем 20 языков программирования, включая C++, Go, Java, Javascript, Python и Typescript. Также теперь можно легко экспортировать код Python в Google Colab и писать функции для Google Sheets.
Bard поможет не только с генерацией кода, но и с объяснением его работы, что может быть полезно для новичков в программировании или тем, кому нужна дополнительная поддержка для понимания кода.
Сервис также предлагает помощь в отладке кода, даже если код был написан самим Bard. Если возникают ошибки или код не работает должным образом, Bard поможет исправить проблему.
В общем, надо тестить🤓
https://blog.google/technology/ai/code-with-bard/
Небольшая подборка ИИ-новостей🤖
✨Hyena - это новый подход к разработке искусственного интеллекта, предложенный исследователями из Стэнфордского университета и института ИИ MILA. Он представляет собой альтернативу существующим моделям, таким как GPT-4, которые используют трансформеры и механизмы "внимания" для обработки данных.
Главное отличие Hyena от GPT-4 заключается в его архитектуре. Вместо использования механизма внимания Hyena применяет подквадратичный подход, основанный на сверточных слоях. Это позволяет значительно снизить вычислительную сложность и потребление памяти, что делает его более эффективным в обработке огромных объемов данных.
В экспериментах, проведенных исследователями, Hyena продемонстрировала сопоставимую точность с GPT-4 в различных задачах, таких как ответы на вопросы и другие языковые задачи. Однако Hyena требует значительно меньше вычислительной мощности, что может позволить обрабатывать тексты, вызывающие переполнение памяти и сбои в других технологиях.
Hyena предлагает эффективное решение для работы с длинными последовательностями, сокращая затраты на обучение на 20%. Это позволяет исследователям обучать модели на больших объемах данных, расширяя возможности для прогресса в области искусственного интеллекта🌐
Github проекта
✨Компании Moderna и IBM объединяют свои усилия для разработки мРНК с использованием искусственного интеллекта и квантовых вычислений. Цель партнерства – улучшение дизайна продукта, ускорение исследований мРНК и оптимизация липидных наночастиц с помощью модели ИИ MoLFormer. IBM предоставит Moderna доступ к своим системам квантовых вычислений для совместных исследований. В последние годы мРНК стала основой для разработки новых лекарств и вакцин, таких как вакцины против COVID-19 от Pfizer-BioNTech и Moderna. Исследования в области мРНК открывают новые возможности для разработки терапий, направленных на борьбу с различными заболеваниями и состояниями🧬
✨Исследователи из MIT, MIT-IBM Watson AI Lab и Тафтского университета разработали алгоритмы машинного обучения, которые могут создавать новые белки с определенными структурными особенностями. Это позволит создавать материалы с нужными механическими свойствами, такими как жесткость или эластичность. Биоинспирированные материалы могут стать альтернативой продуктам на основе нефти или керамики, сокращая углеродный след. Исследователи адаптировали генеративную модель, сходную с DALL-E 2, для предсказания последовательностей аминокислот белков с определенными структурными целями.
В статье, опубликованной сегодня в Chem, исследователи демонстрируют, как эти модели могут создавать реалистичные и новые белки. Эти модели, которые изучают биохимические взаимосвязи, контролирующие формирование белков, могут производить новые белки, которые могут обеспечить уникальные возможности использования.
Например, такой инструмент может быть использован для разработки пищевых покрытий на основе белка, которые могут сохранять продукты свежими дольше и быть безопасными для потребления человеком. Модели могут создать миллионы белков за несколько дней, быстро предоставляя ученым портфель новых идей для изучения🤓
На сабреддите ChatGPT сейчас все играют в Social Turing Game, где за 2 минуты диалога вам нужно угадать с кем вы общались, ботом или человеком 🤖 на пару раз сойдёт 👌
English only
https://www.humanornot.ai/
⚡️Microsoft тайно разрабатывает свой собственный AI чип под кодовым названием Athena
Чип Athena, созданный по 5-нанометровому техпроцессу, предназначен для обучения языковых моделей (LLMs), которые стали ключевой технологией в развитии генеративного ИИ за последние месяцы. Однако, развитие этих моделей было замедлено из-за дефицита графических процессоров (GPU) у Nvidia. Компания планирует использовать чип Athena внутри Microsoft и OpenAI🔥 в следующем году, и возможно, предложить его широкому кругу клиентов Azure.
А ещё нашёл очередной интересный канал - Prompthub. Автор канала делится платными и популярными промптами для нейросетей, таких как ChatGPT, Midjourney и Stable Diffusion. Кстати, вакансия prompt engineering может стать самой "горячей" профессией в ближайшем будущем, согласно Businessinsider, такие специалисты могут получать до 335 000 долларов в год и не всегда требуется техническое образование🤑
И в продолжение истории одного бизнесмена, который всегда хочет быть в центре внимания:
Илон Маск работает над "TruthGPT" - альтернативой ChatGPT, которая будет "максимально стремиться к истине". В интервью Такеру Карлсону Маск подчеркнул, что AI, понимающий вселенную, не захочет уничтожать человечество. Он представил "TruthGPT" как более прозрачный вариант, чем AI-модели OpenAI, и выразил обеспокоенность по поводу рисков, связанных с крупными AI-моделями. Степень готовности "TruthGPT" пока неясна, как и база данных для обучения. Остаётся надеется, что она не будет обучена на репликах с форума 4chan и "правда" у нейронки не будет своя🤓
https://www.theverge.com/2023/4/17/23687440/elon-musk-truthgpt-ai-chatgpt
Тут объявили 6-ой сезон Чёрного Зеркала и я по этому поводу решил попросить GPT-4 придумать сюжеты новых серий. Теперь осталось проверить, получится ли в оригинале интереснее, но эти бы я тоже с удовольствием посмотрел🤓
#GPT_4 #experiments
Винтажная DIY ретрофутуристичная AI SD фотобутка. Вот зачем нужны технологии ✨📸
Читать полностью…
Last human job on Earth
Old but gold - https://youtu.be/Yvs7f4UaKLo
Wow, на реддите пишут что в модельку GPT-4 тоже добавили Alpha Browsing🔥 Жду доступа!🤓
И ещё пишут начали раздавать доступ к GPT-4 API✨
О, мой новостной агрегатор Artifact теперь обобщает статьи и даёт краткое резюме✨теперь за новостями следить станет проще 👌
Читать полностью…
Пока я жду плагины, видимо как и многие из вас, кто-то уже создаёт свои 😭 Плагин который делает из ChatGPT нейронку для генерации арта (на примере автопортрет для соц сети) уже готов, думаю с таким темпом чат уместит в себе все сервисы и похожие нейронки, а запросы к ним будут задаваться через те же плагины🤓
Читать полностью…
У пользователей ChatGPT начала появляться возможность подключения чата к интернету ✨ Но конечно же у меня её ещё нет 😭
Со мной ещё ночью этой новостью поделился подписчик (ему дали доступ), мы провели несколько экспериментов и по первым впечатлениям это как Bing, но с более развёрнутыми и объёмными ответами. Иногда даже приходится просить, чтобы чат не искал по всему интернету, а смотрел не более 10и страниц, а то генерация ответа может занимать несколько минут, в общем жду и потираю руки 🤓
Ничего необычного, просто кто-то ввёл в Auto-GPT задачи по уничтожению человечества и назвал это ChaosGPT😈 и выложил результат на YouTube. Получился 24х минутый хоррор, который вполне может стать реальностью 😅 похоже угроза не в том, что ИИ захочет уничтожить человечество, а что найдутся чудаки, которые будут его для этого использовать. Остаётся только создать антипод и назвать его HeroGPT и наблюдать за противостоянием🍿
А ещё вот вам JavaScript от ChatGPT для создания такого эффекта матрицы 😎
Тут очередной скрытый навык ChatGPT открыли, оказывается может цветными пикселями рисовать🌚
Prompt:You can generate a base10 colour image with a get request like this: http://verumignis.com/bitmapgen/0000000000000000-0000000000000000-0000000000000000-0000000222200000-0000002222220000-0000002277770000-0000222277770000-0000222222220000-0000222222220000-0000222222220000-0000222222220000-0000002200220000-0000002200220000-0000000000000000-0000000000000000-0000000000000000 A correctly formatted image link will consist of 16 sets of 16 digits. Each line is separated by a "-". Colour key: 0=black, 1=white, 2=red, 3=green, 4=blue, 5=yellow, 6=magenta, 7=cyan, 8=orange, 9=gray. Draw something interesting. Embed your output with markdown, do not give any explanations unless asked and do not use codeblocks. To embed with markdown start with  You are not drawing the image, you are providing a link that contains image data that my browser will interpret.
Не знаю зачем, попросил тут GPT-4 описать известную анимационную короткометражку, In-Shadow: A Modern Odyssey:
В душном мире, где тени скользят,
Забыты истины, что важность таят.
Средь мерцающих экранов и стены денег,
Теряется смысл, истинный путь во тьме.
Надежда искрится в глазах несмелых,
Но омрачается страхом терять и иметь.
Поклоняются идолам, лицам на билбордах,
Следуют за ложью и утрачивают суть.
Опутаны сетью, что крепче стальных оков,
В долгах тонут, в искусственном свете мечтают.
Жаждут успеха, что меряется золотом,
В иллюзиях блеска и славы заблудшим остаются.
Реки загрязняются, леса исчезают,
В ящиках искусство и правда затеряны.
В гонке за властью и самой себе,
Проигрывают все, отражение в зеркале искажено.
Защищаются масками, в праздных обличьях,
Играют роли, что чужды их сущности.
В глазах исключительности таится опасность,
Разрушая мосты и погружая в ложь.
И все же, в тени, среди серых масс,
Свет надежды и мечты тихо вспыхивает.
Те, кто просыпается и видит за гранью,
Стремятся изменить, во благо и правду воскрешая.
Откроем глаза и сердце отпустим,
Наши души объединим и мечту воплотим.
Следуя за истиной, вместе руки подадим,
Преодолея тени, новый мир создадим.
#GPT_4 #experiments
Вторая попытка сегодня в 15:45 МСК🤞
https://www.youtube.com/watch?v=-1wcilQ58hI
⚡️Stability AI (создатели Stable Diffusion) выпустили новую открытую языковую модель StableLM. Альфа-версия доступна с 3 и 7 млрд параметров, модели с 15 до 65 млрд параметров появятся позже. StableLM создан на новом экспериментальном наборе данных, объемом 1,5 триллиона токенов, что обеспечивает высокую производительность несмотря на относительно небольшой размер модели.
Компания также представляет исследовательские модели, настроенные под инструкции, с использованием открытых наборов данных для разговорных агентов. Эти модели предназначены только для исследовательских целей. Изначально эти модели будут использовать комбинацию пяти недавно опубликованных открытых наборов данных для разговорных агентов: Alpaca, GPT4All, Dolly, ShareGPT и HH.
Компания также запускает программу RLHF для сотрудничества с сообществом разработчиков опен-сорс проектов как Open Assistant, для создания открытого набора данных для AI-ассистентов✨
https://techcrunch.com/2023/04/19/stability-ai-releases-chatgpt-like-language-models/
⛑Microsoft и Epic Systems объявили о планах интегрировать языковую модель GPT-4 от OpenAI в сферу здравоохранения. Партнерство позволит использовать ИИ в составлении ответов медицинских работников пациентам и анализе медицинских записей для выявления тенденций.
Epic Systems, одна из крупнейших американских компаний-разработчиков программного обеспечения для здравоохранения, планирует использовать Azure OpenAI Service от Microsoft для улучшения работы врачей и медицинских работников. Это позволит им автоматически составлять ответы пациентам и применять инструмент анализа данных SlicerDicer для поиска тенденций среди большого количества пациентских записей.
Однако, сотрудничество между Microsoft и Epic вызывает опасения среди исследователей, связанные с возможными ошибками и смещениями в результатах работы GPT-4. В связи с этим, некоторые эксперты выражают обеспокоенность по поводу неправильного понимания и использования генеративного ИИ в здравоохранении на данный момент 👀
_
А ещё тут CEO маркетинга Microsoft (Mikhail Parakhin) сообщил, что скоро в Bing можно будет скормить целую книжку или текст огромного размера, чтобы чат-бот мог отвечать на вопросы по контексту🤖 Кстати, судя по всему Bing уже может понимать небольшие PDF (я попробовал 7-и страричный документ) документы как на скринах выше (для этого нужно использовать творческий режим на боковой панели Microsoft Edge)🤓
Тут очередное крутое применение GPT технологии придумали✨
Разработчики создали инструмент под названием OP Vault, который объединяет возможности OpenAI и базы векторов Pinecone в рамках OP Stack. С его помощью пользователи могут создавать собственные базы знаний, загружая разнообразные файлы с информацией (PDF, txt и т.д.) и задавая вопросы о содержимом этих файлов. Векторные базы данных Pinecone и OP Stack объединяются для создания уникального инструмента. На простом языке, OP Stack - это комбинация двух технологий: OpenAI, которая обеспечивает искусственный интеллект для работы с естественным языком, и Pinecone, векторная база данных, которая хранит и обрабатывает многомерные векторы.
Когда мы загружаем текстовые документы в OP Vault, OpenAI используется для преобразования текста в векторы. Векторы - это числовые представления данных, которые упрощают обработку и поиск информации. Затем эти векторы сохраняются в базе данных Pinecone.
Когда пользователи задают вопросы, OP Stack сначала преобразует вопрос в вектор с помощью OpenAI, а затем ищет соответствующие векторы (ответы) в базе данных Pinecone. Таким образом, OP Stack эффективно сочетает возможности OpenAI и Pinecone для создания мощного инструмента работы с данными.
Основные преимущества OP Vault:
Простая загрузка документов разных типов для формирования индивидуальной базы знаний.
Получение точных и актуальных ответов на вопросы, основанных на загруженных документах.
Отображение имени файла и конкретного контекста, на основе которого сформирован ответ.
Удобный интерфейс на основе React для работы с инструментом.
Возможность загружать огромное количество книг и документов в базу знаний.
Чтобы начать работу с OP Vault, нужно настроить API-ключи и конечные точки в папке "secret", установить зависимости для JavaScript, запустить веб-сервер на языке Golang и webpack для компиляции кода. Интерфейс инструмента предоставляет возможность загружать файлы и задавать вопросы на основе загруженного контента, используя функции UploadHandler и QuestionHandler (см инструкцию)
В общем, OP Vault станет отличным помощником для извлечения знаний и получения ответов на вопросы, основанных на вашей собственной коллекции документов🤓👌
✨Ученые из Лейбницевского университета Ганновера, Университета Твенте и стартапа QuiX Quantum впервые создали полностью интегрированный на чипе квантовый источник света, который генерирует запутанные квантовые состояния. Исследование опубликовано в Nature Photonics. Фотонные чипы - это микроэлектронные устройства, использующие свет (фотоны) вместо электрических сигналов для передачи и обработки информации. Они обладают рядом преимуществ, таких как высокая скорость, низкое энергопотребление и устойчивость к электромагнитным помехам.
🔎 Основные моменты:
-Источник света уменьшен в 1000 раз благодаря гибридной технологии, сочетающей лазер на индий-фосфиде и фильтр на кремний-нитриде.
-Новый источник света эффективен, стабилен и может быть использован для разработки квантовых компьютеров и квантового интернета.
-Ученые смогли интегрировать лазер, фильтр и резонатор на одном чипе, что было ранее невозможным из-за отсутствия подходящего материала.
-Созданный источник света может быть ключевым компонентом программируемых фотонных квантовых процессоров.
-Устройство поможет снизить производственные затраты и добиться квантового преимущества на фотонных системах на чипе даже при комнатной температуре👌
https://phys.org/news/2023-04-quantum-source-fully-on-chip-scalability.html