47347
Личный блог Дениса Ширяева (🤍🇺🇦), про технологии, интересное или актуальное. В основном я по нейронкам. Связь и реклама: @thenbot
Наконец-то ко мне пришел долгожданный ARM ноутбук за 100$, позже будет отчет о том, что это за зверь, а пока я покрасил его в Windows 95 и счастлив (Внутри Ubuntu 16.04 mate)
Читать полностью…
Продолжу доставать вас AR постами, простите 💖
По ссылке ниже эксперимент рендера в режиме реального времени с помощью iOS ARKit и Unity на iPhone 7.
То есть можно предположить, что кто-то достаточно талантливый в плане продакшена, сможет нас радовать фильмами в дополненной реальности с поддержкой геопозиционирования, и распознованием объектов, когда-нибудь.
https://www.youtube.com/watch?v=MyN2sPx-oy4
Сейчас, конечно, смотреть в телефон не очень удобно из-за небольших размеров экрана — но если бы это были очки, все было бы намного приятнее.
А вот что алгоритм подписал: "A man sitting on a bench next to a dog" ¯\_(ツ)_/¯
Читать полностью…
Многие пишут и спрашивают, забросил ли я канал (серьезно, человек 20 уже), нет не забросил, сейчас работы станет чуть поменьше и я выйду на привычное расписание, уже на следующей неделе 💖
https://vimeo.com/225331391
На видео ниже, вы можете посмотреть любопытный концепт фото-приложения в AR, то есть оно делает 2D снимки, привычные нам и оставляет их в том месте, где находилась камера в момент съемки.
Выходит довольно наглядно и во славу энтропии 👾
Любопытно было бы подвязать это к гео-данным и фоткам из инстаграма, чтобы посмотреть как выглядят все эти фото в реальном мире, и с каких ракурсов их фотографировали
Вы только представьте, через какое-то время, приложения по доставке еды обзаведутся такой AR фичей в рамках конкуренции между друг-другом:
https://www.youtube.com/watch?v=IjE1TnZ1S1c
Ох, скорее бы сентябрь, все это можно будет пощупать уже в продакшене. В целом и сейчас можно, но я искренне не люблю баги, поэтому решил не ставить новую версию iOS 11 раньше времени.
Это уже пятый пост про AR kit, я понимаю, что звучу как apple boy, но я все же о технологии, надеюсь Google допилит свой Tango на фоне таких успехов Apple с AR, и все в очередной раз изменится 🤖
И просто немного бытового применения AR
https://youtu.be/z7DYC_zbZCM
Вы наверное все слышали про то, что возможно телеграму достанется блокировка в РФ, а возможно и нет — я не знаю как там будет, про политику я не пишу принципиально, но пока мы вместе и никто нас не разлучил, я просто хочу сказать вам спасибо, за то, что так получилось, что вы читаете мой канал.
Веду я его где-то месяцев 6 уже и мне не всегда удается уделить ему достаточно времени, особенно в последние недели, но я даже и не думал, что хобби ковырять что-то в нейронках или делиться своими фантазиями о будущем, может кому-нибудь понравится настолько.
Спасибо, вам, вы такие сладкие что сахар горчит после вас!
(не удержался и сделал этот пост еще более мерзким)
И чтобы это сообщение несло хоть какую-то пользу, вот вам робот-картошка:
https://www.youtube.com/watch?v=oNjPHcIzQkM
А еще я зарегистрировал порнодомен где всегда есть актуальные копии постов с моего канала:
http://denissexy.com
💖 💖 💖
Трансфер стилей с помощью нейронных сетей, становится все лучше и лучше —14 июня появился документ описывающий работу алгоритма для переноса текстуры лица (если так можно сказать) с фотореалестичной детализацией. То есть вы задаете стиль который хотели бы получить и выбираете лицо, на которое хотели бы наложить этот стиль, и получается очень клево.
Сам документ вот: https://arxiv.org/abs/1706.04306
А ниже пример того, что удалось получить на выходе.
Помните француза который на документы свои рендеры подал вместо фото? Ну так вот, через какое-то время это сможет сделать любой желающий — было бы здорово получить такой инструмент внутри смартфона, чтобы селфи можно было бы не снимать, а генерировать 💖
Исходный код, пока, недоступен
Наконец-то кто-то сделал регулятор громкости который не стыдно поставить себе на сайт
Читать полностью…
На моём любимом канале «Kurzgesagt – In a Nutshell» новое видео:
https://youtu.be/WSKi8HfcxEk
О том как роботы захватывают рабочие места людей и о том, что в целом это не то же самое, что было в прошлом веке с автоматизацией производства — речь именно о замене людей алгоритмами, софтом.
Также в видео есть немного аналитики — на скриншоте ниже график возникновения новых рабочих мест в США, как видите, он так себе — а людей с каждым годом становится все больше.
С чем я абсолютно согласен — общество по всему миру будет меняться и поменяется еще при нашей жизни 💖🤖
Кто из нас не захотел бы быть доктором октопусом? Ну тем, который человеку пауку надавал еще, помните?
Так вот, в видео ниже дополнительная пара рук, которой управляют с помощью ног:
https://youtube.com/watch?v=sKjAp0iZ7dc
Нейронные сети уже генерировали лица несуществующих людей на основе общего датасета, но как правило на выходе получалось 256 на 256 пикселей и выглядело это так себе в плане детализации.
По ссылке автор задался целью генерировать 4к изображения лиц для арт проекта — ниже пару примеров того, что получилось на выходе и описание подхода.
http://mtyka.github.io/machine/learning/2017/06/06/highres-gan-faces.html
(Немного криповато, да?)
Продолжаю рекомендовать вам всякое – рекомендую авторский канал @groks Ильи Пестова — о технологических трендах и маркетинге. Отчёты, данные, графики, новости, подборки статей на русском и английском, и собственный взгляд на события от человека, работающего в индустрии диджитала
Читать полностью…
Гифка выше, не просто случайный набор кадров испорченный нейронной сетью переноса стиля. Это ученые демонстрируют фотореалистичные достижения нейронной сети которые лучше по результату чем даже у pix2pix, полюбившейся многим.
Собственно в гифке, датасет улицы наложен на кадры из GTA V и если у вас достаточно сильное воображение, как у автора этого канала, вы можете представить куда это идет и сказать вслух HOLY SHI~
Вот этот же момент в видео:
https://youtu.be/0fhUJT21-bs?t=118
Научный документ и код доступны по ссылке:
https://github.com/CQFIO/PhotographicImageSynthesis
Очень странная мода появилась в Китае с этими ресницами-диодами. Я не берусь судить с точки зрения красоты, но всячески поддерживаю наступающий киберпанк с точки зрения фаната Гибсона.
Внутри этой штуки LED диоды и небольшие источники питания, стоит это все — 5$ долларов. По ссылке ниже, можно посмотреть как женщина на себя это цепляет, выглядит странно, но наверное как только источники питания станут еще меньше, такого рода устройства будут еще популярнее и на все части тела 🦄
https://youtu.be/23aBq1dIK3A
То что нейронный сети уже узнают на фотографиях что угодно, это всем уже понятно.
Наткнулся на место, где можно поиграться самому с одним из таких датасетов и посмотреть поймет нейронная сеть, что на фото которое вы ей загрузите, или нет:
http://demo.cs.adelaide.edu.au/
Помимо сегментации (Generate segmentation), как на примере ниже, нейронная сеть может попробовать подписать текст (Generate caption) и объекты на вашей картинке (Object detection).
Результаты как правило хорошие, особенно если на фото есть люди, например, за обеденным столом. Особенно радует тот факт, насколько хорошо алгоритм вырезает область человека из фото, это значит, что через какое-то время в Photoshop станет на один удобный инструмент больше (запомните этот твит).
P.S. Вот прошлый пост, на тему распознавания объектов:
/channel/denissexy/421
Если попросить нейронную сеть (GAN) делать лица и наложить музыку, то получится примерно такое.
Достойная визуализация слова "крипота" 💖
Теперь вы можете порисовать вместе с нейронной сетью:
https://magenta.tensorflow.org/assets/sketch_rnn_demo/index.html
После того, как вы начнете рисовать объект, sketch-rnn попытается его дорисовать, работает довольно клево, ниже гифка. Сверху можно выбрать какой именно объект вы рисуете с нейронкой.
С телефона осторожнее — один датасет-каракуль весит около 5 мб.
Описание проекта находится тут:
https://magenta.tensorflow.org/sketch-rnn-demo ( 💖 Tensorflow)
В середине марта (до WWDC) Bloomberg делал пост о планах Apple на тему AR — там много слухов, часть из которых в итоге подтвердилась и в конце статьи речь идет о очках, которые, вполне логично выпустить, если решена проблема с трекингом поверхностей.
Ну так вот, по моему мнению, она решена в iOS 11:
https://www.youtube.com/watch?v=TBtwElmFbLA
И это настолько хорошо выглядит, что даже страшно представить, что было-бы, если бы кто-то из корпораций выпустил бы нормальные очки или линзы, в общем, устройство которые можно было бы использовать постоянно. Подождем немного и непременно узнаем.
Я так понимаю, что то, что показано в видео, было записано в специальной комнате с датчиками со всех сторон — но как же клево это все смотрится в AR 👾
На DTF вышел совершенно фантастический пост о возможностях AR kit в iOS11, с примерами. Я вот проморгал во время презентации на WWDС, что вокруг объекта в AR kit можно ходить и просмотреть его со всех сторон.
Жду не дождусь запуска AR kit на массовый рынок, чтобы посмотреть то, на что способны студии и инди разработчики 💖
https://dtf.ru/7618
Если вам кажется, что вы все понимаете в индустрии VR и вас сложно удивить, то я принес вам ссылку:
https://youtu.be/S5jWuwx1cP4
Я примерно понимаю, что происходит в видео, но расписывать это не возьмусь.
Вот официальная копипаста:
«We present FaceDisplay, a multi-display mobile virtual reality (VR) head mounted display (HMD), designed to enable non-HMD users to perceive and interact with the virtual world of the HMD user»
Скажу лишь только, что такой шлем очень бы пошел группе Daft Punk, но скорее всего не VR-геймерам (Если только за дело не взялась бы Nintendo)
Наконец, трезвые предсказания по VR\AR до 2025 года от Джези Скэла, профессора Carnegie Mellon University:
— Рынок VR игр достигнет $7,5-$22,5 млрд, что составит от 5% до 15% всей игровой индустрии [к примеру, рынок IoT платформ к этому времени не превысит $2 млрд]. Прогнозы Digi-Capital про рост рынка AR до $90 млрд к 2020 он называет «очень, очень неверным»;
— Рынок AR будет составлять всего лишь 15% от рынка VR;
— Большая часть взаимодействий с игровым миром будет реализованы через контроллеры, вроде Touch или Wands. Системы, которые бы отслеживали движения рук не будут активно внедрятся потому что а) дорого, б) они не точные, в) не передают тактильных ощущений;
— AR нужно много времени чтобы выглядеть так как повседневные очки. До этого момента AR будет громоздким и на улицах будет выглядеть глупо [Джэзи вспоминает чудовищный провал Google Glasses];
— Hololens не скоро станет повседневным явлением. Из-за тёмных стёкол сложно различить верхнюю часть лица. А общество не примет устройство, которое не позволяет установить естественный зрительный контакт;
— Никто не хочет быть собеседником человека с громадной камерой на очках, речь о приватность. Это еще одна проблема для развития повседневного AR;
— VR будет удерживать преимущество благодаря несравненно большему углу обзору;
— Сенсоры для аугментированной реальность находятся на стадии раннего детства: они недостаточно хорошо распознают окружающий мир и требуют много ресурсов.
И закончил он клёвой фразой «We are designing the eyes of the next generation. So I urge you to all work together to make sure we make the best damn eyes the world has ever known.»
(Да, у меня в последнее время любовь к скриншотам в стиле IE6, простите)
Читать полностью…
Собрал любопытные исторические карты обработанные нейронной сетью pix2pix
http://telegra.ph/Starye-karty-teper-novye-karty-06-08
А вот это находчиво — на ТЖ пост о том, что хакеры могли управлять вирусом с помощью комментариев к постам Бритни Спирс в инстаграм ¯\_(ツ)_/¯
https://tjournal.ru/45138-vzlom-ili-instagram
Как же клево смотрятся все эти отсканированные 3D модели в умелых руках – по ссылке ниже клип группы Grand Yellow с песней “On My Way”
https://vimeo.com/akatre/onmyway
Я вас как-то мучил, просил задать вопросы таксистам: что они думают насчет автономных автомобилей? Как скоро они появятся и станут обычным видом такси?
Довольно много людей прислали ответы, спасибо вам за то, что поучаствовали 💖
В 70% ответы были в стиле «Да как робот по таким дорогам будет ездить», «Да, в мире где-то роботы начнут людей перевозить, но в России еще долго такого не случится», «Вы зиму нашу видели? Как он тут проедет!» и т.п.
Остальные в целом принимают автономное будущее, а один таксист пожилого возраста отдельно сетовал: «Я не знаю, чем буду заниматься через 10 лет, я сейчас уже вижу как сильно Uber изменил то, где я работаю, – что будет, ума не приложу».
Отдельно порадовал ответ в стиле «Да конечно наступит, но мне больше интересно, как поменяются бандиты под эту индустрию – заказал себе машину, загнал в свинцовый контейнер и разбирай там» – действительно интересная мысль, о которой я даже не думал.
Я наткнулся на довольно адекватное исследование на тему автомобилей будущего – в исследовании утверждается, что к 2030 году 95% всего транспортного потока такси будет осуществляться автономными машинами. Речь идет именно о такси, не о частных машинах и не о грузовых перевозках – что будет происходить там, в документе не уточняется.
То, к чему я со скептицизмом отношусь в документе, так это к части о банкротстве множества нефтяных компаний к 2030 году. Это 13 лет и у них сильное лобби, я хотел бы в это верить, но звучит наивно (исключительно мое мнение, я не навязываю, более того – я совсем не экономист, но промышленная индустрия все так же потребляет большое количество нефти).
Ну и ради интереса, посмотрите на фото Пятой Авеню Нью-Йорка в 1900 году – больше 90% транспорта это лошади с повозками. Посмотрите на эту же улицу в 1914 году – 90% транспорта это автомобили и это всего за 13 лет.
Но, конечно, у лошадей не было лобби и миллиардов долларов на торможение технологического прогресса 🎠
Ссылка на исследование в PDF, 15 мб (зеркало)
