Особенности создания кино и анимации при помощи нейросетей. Автор: режиссер и сценарист Дмитрий Алексеев. По вопросам сотрудничества: @alekseevdir
Ур Торум: Предпродакшн
У Крис Велрайт помимо "Ур Торум" есть и другие произведения разворачивающиеся в этой же вселенной. И их особенность в том что этот фентези мир базируется в большей степени на культуре и исторических особенностях Древнего Китая. После нашего предыдущего проекта, конечно же хотелось дальше развиать тему кинематографичного аниме. Но как показали тесты визуала , нейросеть очень условно и с обилием множества мелких деталей и артефактов создает китайскую эстетику. Это мешало созданию мрачного кинематографичного стиля, который бы органично анимировался. Поэтому было принято решение делать визуал на стыке аниме и европейской кинематографичной анимации.
С этой задачей отлично справился Сергей. Подробнее о чем он расскажет сам в следующем посте.
"УР ТОРУМ" (Ai animation book trailer)
Как может выглядеть анимационное темное фэнтэзи, сделанное в России?
Благодаря нейросетям, крутой истории и нашей команде мы нашли для себя ответ!
А вы бы хотели посмотреть такой фильм или сериал?
Режиссёр: Дмитрий АлексеевЧитать полностью…
Арт-директор: Сергей Козлов
Автор повести: Крис Велрайт
AI-художники, анимация и композ:
Дмитрий Алексеев, Сергей Козлов
Монтаж: Дмитрий Алексеев
Доп. покадровая анимация персонажей и липсинк: студия Blaster
Композитор: Заур Парсиати
Вокал: Рината Гасанова
Саунд дизайн: Фёдор Купряков
Студия дубляжа: audio-production.ru
Друзья!
⠀
Пришло время прервать молчание, которое длилось несколько месяцев.
⠀
К сожалению, желание делать каждый новый проект лучше и сложнее предыдущего отнимает все силы. Да и мой внутренний тревожный прокрастинатор-перфекционист не хочет превращать канал в очередную новостную помойку о нейросетях.
⠀
Хочется делиться своим реальным опытом и видением творческого процесса, а не очередными инфоцыганскими «визгами» о невероятном будущем, которое все никак не наступает.
⠀
Нейросети все еще остаются "серой зоной" для большинства, а на просторах интернета информация в большинстве случаев носит либо технический характер, либо преувеличивающий возможности нейросетей над людьми. А авторов которые создают что-то интересное и вовсе можно по пальцам пересчитать.
⠀
Поэтому у меня для вас две хорошие новости, и нет это не реклама очередных курсов.
⠀
Первая новость - это релиз нового проекта, который длился 4,5 месяца. Дроп будет завтра. В качестве тизера можно увидеть стоп-кадр прикрепленный к посту.
⠀
Вторая новость - после релиза мы наконец будем рассказывать в последующих постах о работе над проектом и какие инсайты получили.
⠀
Так что включайте свои уведомления, чтобы не пропустить то, что может быть действительно интересно и полезно.
⠀
А пока напишите в комменты, какого рода постов и информации связанной с творчеством при помощи нейросетей вам не хватает? Будем разбираться😎
Наш клип Push The Pusher стал поводом для создания новой категории на фестивале Unknown Film Festival
28—30 июня в Екатеринбурге состоялся ежегодный международный кинофестиваль Unknown Film Festival, куда отправили более 600 работ творцы с разных уголков планеты. Лишь 50 работ попали в шорт-листы и стали номинантами на звание лучших в одной из 5 категорий.
Наш с Дмитрием клип для группы Pain стал номинантом в категории Music Video. Хоть наша работа и не попала в тройку лучших именно в этой категории, произошло куда более значимое.
Организаторы феста выдали нам "спецприз" за открытие новой категории на фестивале — Искусственный Интеллект. Это большая победа для нас, ведь мы в буквальном смысле оставили свой след в истории феста и пушим ИИ-творчество к новым горизонтам, и несомненно, это круто, что именно наша работа стала поводом для такого решения.
Я очень рад, что у нас в стране достаточно тепло относятся к творчеству, созданному при помощи ИИ-инструментов. Мы с Дмитрием стараемся создавать свои работы так, чтобы они выглядели эстетически красиво и интересно, не только в контексте нейронок, но и вообще в контексте творчества и кинематографа. И это прекрасно, что такой подход даёт свой отклик.
Спасибо за внимание!
"Tomorrow" (Short film by Paul Trillo)
Перед вами отличный пример прикладного применения нейросетей в кино. По крайней мере для клипов и короткометражек это имба.
Во втором видео режиссер рассказывает и показывает как при помощи нейросетей и съемок на хромакее можно создавать эффектные кадры довольно просто и быстро.
1. Генерируем кадры с персонажами в сцене.
2. При помощи инпейнта убираем персонажа из сцены.
3. На съемках с хромакеем используем кадр с персонажем как референс по свету.
4. Добавляем отснятого актера на кадр очищенный от персонажа и композим с фоном.
5. Подписываем свой профиль в соц. сетях AI FILM DIRECTOR!
https://youtu.be/uuYZ0yjf4yQ?si=31dAQ0cZAfgaamU4
Друзья! Сегодня у меня долгожданная премьера!
Официальный клип для легендарной шведской группы Pain на трек "Push the pusher". Это не только мой полноценный дебют как режиссёра анимации. Но и доказательство состоятельности техники создания контента при помощи Midjourney и After Effects, во главе которых режиссерские приемы визуального сторителлинга.
В течении трёх месяцев в прошлом году, плечом к плечу, мы с Сергеем Козловым создавали эту метафорическую антиутопию в духе любимых ретро аниме фильмов!
Когда неожиданно завирусилась наша ретро аниме технодемка "Воспоминания детства" у нас уже был готов тизер трейлер, который будоражил воображение. Но мы даже не могли представить в какое безумное и прекрасное приключение мы отправлялись.
Буду рад вашим впечатлениям от увиденного в комментах!
Смотреть на Youtube
Что такое AI-режиссура? // Голосовой чат 🔊
10.04, 19:00 (Мск)
Для того, чтобы немного больше разобраться в том, чем в кино-/видеопроизводстве могут быть полезны нейросети, мы обратились к режиссёру и сценаристу Дмитрию Алексееву, который также позиционирует себя как AI Filmmaker, но что же это такое? Об этом и поговорим!
Встречаемся как всегда в голосовом чате нашего Tg-канала уже в эту среду - 10.04, 19:00 (Мск) 🔥
Несколько дней назад мой коллега и по совместительству давний друг Дмитрий Алексеев @aifilmmaker, с которым мы создали душевные ролики о воспоминаниях из детства, опубликовал свою новую анимационную работу. И, пользуясь случаем, я поспрашивал его о создании ролика, трудностях творческого процесса и, само собой, о нейросетях.
Читайте наш диалог в формате интервью в Telegraph. Приятного прочтения!
🐸 @BLACKTRACED
В этот праздничный день хотел бы пожелать всем дамам: не бояться быть прекрасными и хрупкими созданиями когда вам нужна поддержка и принятие от по-настоящему близких людей, даже если вы сильная героиня крутого аниме фильма.
⠀
С праздником вас дорогие, прекрасные и бесконечно вдохновляющие!💐♥️
⠀
Sora
Долго думал стоит ли вообще комментировать анонс новой гиперреалистичной видео-нейросети Sora от создателей ChatGPT, потому что посты о ней летят последние дни из каждого утюга.
Нейроцыгане ликуют: "Готовьте кошельки! Будущее наступило! Мир не будет прежним!"
Люди восторженно несут эту информацию в массы, не понимая главного: с появлением технологий как Sora, мы можем вернуться к истокам, к творчеству, к искусству.
Что это свобода от "оков" сложной технической реализации самых смелых идей, которая не дает возможности людям делать то ради чего в принципе они создали творчество и искусство.
Я повидал немало людей, которые отказывались от своей мечты: творить и созидать.
Нет денег, нет времени, нет технических ресурсов и прочие оправдания. Я и сам из их числа.
Надеюсь скоро будет достаточно сесть за компьютер, открыть нейросети и задать себе вопрос:
Чем я хочу поделиться с этим миром?
Отличный пост о нашей работе, который затрагивает очень актуальную проблему медиа проектов сделанных с помощью ИИ.
Читать полностью…Под конец года многие из нас ощущают пустоту и меланхолию. Еще один год пролетел, как вспышка. Новогоднего настроения всё меньше, мы повзрослели и только воспоминания о "тех самых" зимних каникулах отдаются теплым эхом времени.
⠀
Мы хотим подарить вам немного тепла и пожелать, чтобы даже в самые холодные грядущие годы вы сохраняли его в своих сердцах!
https://youtu.be/lyqrS6hkRuo?si=GWDhD1xrEVWd5HgX
Вот только этого ради стоило изобрести MidJourney 🫠
Childhood Memories (Ghibli Studios Animation Tribute)
Дмитрий Алексеев - пионер синтетического кино (так он сам себя назвал, но никто и не возражал вроде), на этот раз подготовил для зрителей короткий мультипликационный ролик, в котором соединил бытовую пост-советскую реальность и эстетику миров Хаяо Миядзаки, используя редакторы графические-AI редакторы и афтерэффектс. Надо сказать, что трогает прямо за живое, надо сказать, что восхитительны и милы сердцу обнаруженные автором параллели. Спасибо, Дмитрий! Синтетике Быть!
Друзья, как то неожиданно с утра полетели со всех сторон новости о публикации нашего ролика в крупных интернет пабликах!
Спасибо вам большое за теплые слова и отклик в ваших сердечках на нашу работу! ❤️
Но к сожалению многие интернет СМИ не считают нужным указывать источник авторства. Поэтому у меня к вам небольшая просьба. Пожалуйста, покидайте в комменты паблики где запостили нашу работу. 🙏🏼
Вот на данный момент список пабликов о публикациях которых мы в курсе :)
1. Двач: /channel/dvachannel/123502
2. Топор Live: /channel/c/1754252633/71416
3. Топор 18+ /channel/c/1237513492/51855
4. Нейродвиж: /channel/neuraldvig/2210
5. Новости Москвы: /channel/moscowmap/56687
6. Эксплойт: /channel/exploitex/9377
7. Передали коллегам: /channel/collegi/4678
8. Бумеры смотрят телек: /channel/boomers_TV/2795
9. Санкт-Петербург Life: /channel/lifepetersburg/27376
10. Midjourney Нейросети: /channel/DeepFaker/8522
11. Дневник Алхимика: /channel/alchemist_tm/874
12. Пикабу: https://pikabu.ru/story/teplyikh_vospominaniy_vam_10568079
13. Rozetked: /channel/rozetked/16446
14. Яплакаль /channel/yaplakal/42614
Ур Торум: Предпродакшн
После написания сценария ролика по ключевым сценам повести встал вопрос реализации задуманного. Как это будет выглядеть? Как передать те самые ощущения мира и истории на экран?
Для начала, чтобы показать свое режиссерское видение, обычно я делаю сизл трейлер (ролик собранный из кадров других фильмов на схожую тематику). Это позволяет уже на первых вариантах монтажа, увидеть все ошибки допущенные в сценарии и доработать повествование на монтаже.
Но как быть с персонажами, которые произносят реплики в кадре? Обычно для презентации своих идей через такие черновые ролики, делают либо свою озвучку, либо берут из фильмов общие подходящие фразы. Это была не наша история, ведь это был фактически первый черновик нашего трейлера.
И тут на помощь пришел нейросетевой генератор озвучки Steos Voice. А именно режим клонирования голоса, когда в ответ на ваше голосовое присылается "переозвучка" выбранным из базы голосом. В нем содержится огромная база голосов актеров озвучания из известных игр. И это идеальный инструменты для черновой озвучки, которая позволяет понять какие голоса будут органичны, а также для более точного тайминга монтажа. Так весело я и провел время играя то сурового старосту, то ехидную ведьму.
Ниже вы можете увидеть тот самый сизл трейлер.
Делали бук-трейлер при помощи нейросетей,
а получился концепт-трейлер анимационной экранизации.
Запросы на воплощение чужих историй при помощи нейросетей прилетают довольно часто, но все они как правило ничем не заканчиваются. Посредственные не кинематографичные истории и банальное отсутствие бюджета и вкуса у авторов, уже на старте отбивают желание ввязываться в это на долгие месяцы.
Но в этот раз вселенная снова сложила все самые лучшие звезды! Автор поставила нам задачу экранизировать пролог повести в анимационном стиле, но с атмосферой синематиков игры "Ведьмак 3: Дикая охота". Это наверное те слова, которые в референсах мечтает увидеть любой режиссер, который берется за проект в подобном жанре.
Ну а дальше произошло чудесное сотворчество и поддержка всех моих желаний как режиссера для достижения максимального результата. Повесть за авторством Крис Велрайт оказалась отличной историей в жанре хоррор дарк фэнтэзи. Экранизация короткого пролога превратилась в целый сюжетный трейлер. Я позвал снова скрестить наши мечи Сергея. И решил пойти еще дальше. Пригласил для работы над липсинками (синхронизация движений губ персонажей и актеров озвучания) и покадровой анимацией персонажей в некоторых кадрах анимационную студию, композитора, вокалистку, саунд дизайнера и студию дубляжа для озвучки.
Целая команда! Но где же во всем этом нейросети? Об этом я расскажу в последующих постах о работе над проектом. А пока рекомендую вам сделать звук погромче на ваших колонках или наушниках, чтобы оценить проделанную нами работу.
Нашему ролику «Childhood Memories» сегодня исполняется год!
Сегодня, 16 августа, нашему с Дмитрием ролику «Childhood Memories», посвящённый воспоминаниям о нашем детстве в 90х, исполняется год!
Это был чистой воды эксперимент: «давай попробуем и посмотрим, что вообще из этого получится». Для нас, как и всегда, самым бесценным был опыт — в процессе создания, мы поняли, как можно работать с нейросетками для создания анимационного контента, как вообще мы применим их в своей творческой работе и что в перспективе с этим можно творить дальше.
Сейчас у нас очень много идей, много проектов в работе, на каждом из которых мы стараемся повышать планку качества и очень жаль, что мы не можем их реализовывать настолько быстро, насколько этого хотелось бы. И само собой, нам не терпится поделиться с Вами своими новыми работами!
Естественно, вспоминая о «Childhood Memories», сразу вспоминается и его популярность. Совершенно неожиданно для нас, на следующий день после публикации, этот ролик разлетелся буквально по всему интернету. Его начали публиковать крупные Телеграм-каналы и различные СМИ, о нём сняли репортаж на телевидении, напечатали статью в газете московского метрополитена, сам Дима рассказывал об этом ролике на конференции Яндекса, где 5000 зрителей смогли посмотреть это видео вживую на огромном экране! Некоторые ссылки на публикации собраны у Дмитрия, а также у меня в заблокированной социальной сети в хайлайтах «Media».
Очень приятно осознавать, что этот ролик нашёл отклик в сердцах у такого огромного количества людей! Спасибо огромное всем кто его репостил и комментировал, всем редакторам СМИ и каналов, кто опубликовал наш ролик, всем, кто поделился нашим творчеством!
С Днём Рождения, родной!
Luma Dream Machine
Инсайдеры давненько обещали что это лето будет жарким на анонсы. Но то что видео модель выпустит Luma labs вряд ли кто то ожидал.
Так и для меня было неожиданным официальное приглашение в закрытое бета тестирование. Пока у нас нет Sora, Kling и Gen3 это лучшее что есть сейчас в доступе. Ну и самое приятное, что есть доступ на 30 генераций в месяц бесплатным юзерам. Новую нейросеть можно испытать здесь.
Как и полагается первой версии модели есть куча ограничений и артефактов, но я привык искать возможности. И поэтому запилил небольшой бодрый ролик в духе fashion видео ;)
Делитесь своими шедеврами в комментах!
#LumaDreamMachine
Pain - Push the pusher (Ai animation official music video)
Directed by: Dmitry Alekseev
Written and created: Dmitry Alekseev & Sergey Kozlov
Tools: Midjourney x Photoshop x After Effects x Premiere Pro
Character Voices: Elevenlabs
WATCH FULL VIDEO ON YOUTUBE
Друзья, мы в прямом эфире!
Переходите на канал Режиссерский Разбор и вверху будет кнопка Присоединиться / JOIN
Синтетическое кино еще ближе? Или OpenAI опять нагоняет хайп?
Вчера на официальном сайте OpenAI первым представителям креативной индустрии дали пощупать всеми ожидаемую SORA. Посмотреть все работы и почитать впечатления участников закрытого тестирования можно здесь.
Мне же из всей подборки хочется показать вам только два ролика, которые на мой взгляд стоят внимания. Остальные выглядят как расширенные технодемки, которыми OpenAI постоянно спамит весь интернет заставляя представителей медиаиндустрии и корпорации впадать в экзистенциальный кризис.
1. Короткометражка “Air Head” от студии Shy kids . История про мужчину у которого вместо головы воздушный шарик. Показывает насколько сильно изменится короткая форма визуальных историй в ближайшем будущем. Безграничные возможности создания фотореалистичного сюрреализма позволят найти новые самые безумные и яркие формы для рассказа коротких историй. Поэтому важно развивать навыки внятного и увлекательного рассказа историй любыми визуальными средствами, чтобы не утонуть в потоке бессмысленного "артхауса" который затопит соц.сети после релиза SORA.
2. Музыкальное видео режиссера Paul Trillo. Это нельзя назвать полноценным клипом, но уже выглядит как "метеорит" летящий в сторону индустрии музыкальных видео, но когда он упадет неизвестно. Уверен мы увидим немало шедевральных клипов, когда режиссеры не будут скованы ограничениями бюджетов и возможностей производства.
Но когда все это дадут в открытый доступ? Вопрос до сих пор висит в воздухе. Есть обещания, но никаких конкретных дат нет. К тому же в еще одной статье рассказывается как Сэм Альтман (сооснователь OpenAI) торгует лицом на вечеринках киноиндустрии в Лос-Анджелесе. Подозреваю, чтобы не нажить себе могущественных врагов , бизнес которых очень пошатнет появление Sora в открытом доступе. И если интеграция в кинобизнес будет успешной, дадут ли нам плебеям доступ к божественной силе нейромиров?
Вопрос остаётся открытым. А пока смиренно ждем и надеемся на светлое нейро будущее.
Мой друг и коллега Сергей Козлов, создал свой тг канал, который однозначно стоит вашего внимания. Там нет инфо мусора и дешевых байтов. Только действительно интересные новости о нейросетях и крутые кейсы. И по случаю выхода аниме короткометражки к 8 марта, он задал мне несколько хороших вопросов , ответы на которые превратились в целое интервью.
/channel/blacktraced/213
Сегодня в свой День Рождения делюсь фрагментом выступления с чудесной конференции Яндекса Реконфа, где рассуждаю о том, чем являются для меня нейросети и какое будущее нас ждет.
В этот день желаю себе создавать больше крутых кейсов и просветительского контента, чтобы вдохновлять окружающих!
А вам желаю находить новые пути для реализации ваших идей при помощи новых технологий, не отвлекаясь на людей заливающих в уши инфоцыганскую смолу😏
Если вы где-то читаете пост о том, что "нейросеть придумала, как бы выглядел Гарри Поттер в Челябинске" или "нейросеть сгенерировала мультфильм в стиле Миядзаки", то можете смело отписываться от такого канала и больше к нему никогда не возвращаться, потому что его ведут идиоты.
Нейросеть ничего не делает сама. За любым интересным контентом всегда стоит немалый человеческий труд. А иногда так и прямо огромный. И авторы заслуживают того, чтобы быть упомянутыми.
Как пример, это видео Дмитрия Алексеева и Сергея Козлова. Если вы никогда не работали с картинкой и анимацией, может, вы и не увидите тут чего-то особенного. Но, вообще-то, это серьезная, сложная композная работа, которая будет не под силу большинству выпускников курсов "After Effects за месяц". Не говоря уже про добротную режиссуру и, в целом, художественный вкус.
Дмитрий Алексеев и Сергей Козлов - Авторы. А нейросеть - это просто инструмент.
https://www.youtube.com/watch?v=lyqrS6hkRuo
#youtube #анимация
Memories of winter holidays (Ai animation)
Created with Midjourney and After Effects by:
Dmitry Alekseev and Sergey Kozlov
Music: hiphopklassika">Hip-hop classica
Друзья!
Как вы могли заметить я не занимаюсь информационной спекуляцией и различным скамом касательно нейросетей. Вместо этого ежедневно в поте лица приближаю релиз нового амбициозного проекта.
В связи с нововведениями телеграмма, чтобы у вас была дополнительная возможность быть первыми в курсе всего самого интересного, тех у кого есть премиум прошу поддержать голосом мой канал.
/channel/aifilmmaker?boost
Приятно читать такой отзыв от режиссера "Майора Грома" ) Спасибо! @olenjon_official
Читать полностью…Directed by:
Dmitry Alekseev
Created with Midjourney and After Effects by:
Dmitry Alekseev and Sergey Kozlov
Ghibli Studio characters rotoscoped with Runwayml.com
Music: “Многоточие - в жизни так бывает”
( Orchestral cover )