theworldisnoteasy | Образование

Telegram-канал theworldisnoteasy - Малоизвестное интересное

63565

Авторский канал Сергея Карелова о самом важном на фронтирах науки и технологий, что кардинально изменит людей и общество в ближайшие 10 лет. Рекламы, ВП и т.п. в канале нет. Пишите на @karelovs

Подписаться на канал

Малоизвестное интересное

ИИ можно научить интуитивной прозорливости.
Глубокое обучение способно находить скрытые маркеры провидческих идей в обширных корпусах текстов.

Такой вывод следует из фантастически интересной работы «Модель глубокого обучения провидческих идей демонстрирует, что они возникают на периферии», которая выйдет в мартовском номере PNAS Nexus.

Революционность этого открытия в следующем:
• До сего времени считалось, что провидческие идеи могут быть обнаружены только постфактум, то есть когда известно будущее состояние мира.
• Оказалось, это не так. ИИ способен идентифицировать провидческие идеи в настоящем времени, не зная будущее состояние мира.


В 21 веке открытие механизма серендипности (способности к интуитивным прозрениям, лежащей в основе провидческих, абсолютно нестандартных и воистину прорывных идей) может стать для человечества столь же важно, как открытие квантовой механики для 20го века.

Дело в том, что серендипность это:
✔️ важнейший элемент, без которого любые стратегии инноваций не будут оптимальны - см. мой пост;
✔️ ключевая отличительная способность разума Homo sapiens, делающая нас «богоподобными», позволяя нам привносить связную, богатую смысловую перспективу в многомерную сложную реальность (часто эту способность ошибочно называют интуицией, но это, хоть и близкая, но совсем иная способность) – см. мой пост;
✔️ один из семи базовых элементов (наряду со смежным возможным, аффордансами, предиктивным мозгом, дистальным моделированием, квантовой суперпозицией внутренних реальностей и мультиверсом) «теории относительности интеллекта» Роли-Йегера-Кауффмана ) – см. мой пост;
✔️ уникальное эволюционное преимущество (наряду с нерациональностью), помогающее людям не только творить, но и выживать за счет способности решать невычислимые задачи – см. мой пост;

Согласно «теории относительности интеллекта», серендипность не доступна ИИ.
Но зато, как показало новое исследование, с помощью глубокого обучения можно обнаруживать в корпусах текстов из разных сфер деятельности людей (бизнес, право, политика) скрытые лингвистические маркеры провидческих идей.

Кроме того, исследование установило два нетривиальных момента.
1. Провидческие идеи возникают не в центре, а на периферии многомерного пространства слов.
2. Для появления провидческой идеи, важен не только сам автор, но и контекст, в котором идея рождается. Хотя способность генерировать такие идеи часто приписывается отдельным людям, их происхождение может быть связано как с людьми, так и с контекстом.

Авторы идентифицируют лингвистические маркеры провидческих идей, используя представления двунаправленного кодировщика трансформера BERT - глубокую нейронную сеть, которая кодирует семантическую и контекстуальную информацию языка.

Новый метод позволяет извлекать провидческие идеи из естественного языка независимо от формы, в которой эта идея в конечном итоге реализуется, и в широком диапазоне областей.
#инновации #серендипность

Читать полностью…

Малоизвестное интересное

​​22-го января сотни миллионов китайцев уйдут в Метаверс на супер-шопинг.
Впервые в истории до половины населения Поднебесной встретят Китайский Новый год в онлайне.

Taobao, один из крупнейших китайских интернет-магазинов, принадлежащий Alibaba, проводит финальные испытания своего первого виртуального мира для прямых трансляций в Метаверсе, дебют которого запланирован на 22 января в преддверии Лунного Нового года. Этот виртуальный мир будет использован для организации истинной новогодней феерии покупок.

Люди смогут размещать заказы в этом виртуальном мире в реальном времени через гигантские рекламные экраны.

Невиданные уникальные функции (например, 360-градусный осмотр товаров, виртуальная примерка AR и VR, взаимодействие в ходе шопинга) поразят покупателей совершенно новым опытом, сочетающим в себе виртуальный шопинг с услугами логистики покупок и доставки в физическом мире.

Супер-шопинг в Метаверсе будет сопровождаться иммерсивным онлайн-фестивалем празднования Китайского Нового года.

Детали супер-мероприятия хранятся в тайне. Но выглядеть это будет примерно так и так.

О том, что еще китайцы собираются делать в Метавселенной, смотрите мои посты по тэгам:
#Metaverse #Китай

Читать полностью…

Малоизвестное интересное

​​Человечество на пути к пропасти AICG, и не видно способа отвернуть.
Сенсационное обращение ИИ-гуру Китая Кай-Фу Ли к мировому сообществу разработчиков ИИ.

В 2023 мир столкнется с риском более серьёзным, чем риски ядерной войны, голода или пандемии. Это риск неотличимости правды от лжи, как для индивидов, так и для социумов любых масштабов.

✔️ Материализация этого риска более вероятна, чем риска гибели миллионов в результате ядерной войны, мирового голода или сверхсмертоносной пандемии.

✔️ Последствия же материализации этого риска окажутся разрушительны для большинства из существующих на Земле цивилизаций (ибо все они имеют в своей культурной основе различие правды и лжи).


Об этом говорил в своем предновогоднем обращении к мировому сообществу разработчиков ИИ один из самых авторитетных в мире ИИ специалистов — Кай-Фу Ли: ученый, венчурный инвестор, человек с головокружительной карьерой (Apple, Silicon Graphics, Microsoft, Google) и автор двух мировых бестселлеров про ИИ.

Технологиями, позволяющими стирать различие правды от лжи, являются технологии AICG (генерация контента с помощью ИИ).

В основе AICG обучаемые на масштабируемых «больших данных» т.н. «базовые модели» ИИ, адаптируемые для широкого круга задач нижестоящего уровня (большие языковые модели, генераторы изображений, звука, видео, 3D ...)
Достигнутый к началу 2023 г. уровень развития AICG уже таков, что в этом году начнется их внедрение в поисковых системах и онлайн торговле товарами и услугами (как коммерческими, так и государственными).

Ключевой особенностью онлайн систем нового типа станет то, что наряду с имеющимися у них возможностями персонализации, у них появятся возможности:
• убедительного обоснования навязываемого человеку выбора, с учетом его персональных предпочтений, вкусов, склонностей, пристрастий и предубеждений;
• представления преимуществ навязываемого человеку выбора в наиболее привлекательном для него сочетании мультимедийных форматов
.

Новые возможности позволят пробивать персональные фильтры критического мышления подавляющего числа людей, склоняя их к выбору, решениям или действиям, выгодным для владельцев онлайн-платформ.
Ну а наличие среди их владельцев (или тех, кто может на них влиять) лиц, не имеющих этических тормозов, будет иметь катастрофические последствия. Осуществляя любой выбор, решение или действие в онлайне, люди не будут различать правду от лжи: действуют ли они по своей воле и собственному выбору или являются объектом манипуляций заинтересованных лиц, втюхивающих им те или иные товары, услуги, идеи, суждения и т.д.

И никакие полномочия правительств не смогут подобное предотвратить уже известными методами.

Кай-Фу Ли считает, что высокая вероятность материализации вышеописанного определяется двум факторами.
1. Непонятно, как контролировать AIGT.
Человечество обладает средствами снижения вероятности известных смертоносных рисков (даже риск ядерного Апокалипсиса остается ограниченным уже полвека из-за наличия у сверхдержав механизма полного взаимного уничтожения).
Новый риск имеет совершенно иной характер, и способы снижения его вероятности пока неизвестны. А способы, работающие для других глобальных рисков здесь будут неэффективны.
2. AIGT обещает столь колоссальную выгоду для технологических гигантов (коммерческую) и правительств (политическую), что противопоставить этому что-либо проблематично.

Кай-Фу Ли полагает, что помешать материализации нового риска уже невозможно. Технологии AICG уже существуют.
И потому мировому сообществу разработчиков ИИ необходимо срочно направить максимальные усилия на поиск способов минимизации вреда при широком распространении AICG.

Об этом же см. мои недавние посты 1, 2, 3, 4

#AICG

Читать полностью…

Малоизвестное интересное

​​Кто более виновен в происходящем безумии - элита или народ.
О том, почему большой войны не миновать, я написал еще 5 лет назад. Сегодня этот прогноз выглядит еще более вероятным. Происходящее кажется безумием, хотя совсем недавно большинство было уверено в скорой и окончательной победе «добрых ангелов человеческой природы».
Чьими усилиями мир докатился до безумия, грозящего самоуничтожением?
Что стало главной причиной раскручивания маховика большой войны?
• Агрессивность и жестокость народа, скрытые под тонким слоем цивилизованности?
• Или же причина в катастрофичности пути, по которому поводыри из элиты повели за собой народ?


Ответ на вопрос - кто (элита или народ) оказывался более виновен в расширении пределов общественной поддержки войн США, дан в монографии проф. Беринского «Во время войны: понимание американского общественного мнения от Второй мировой войны до Ирака».
Анализируя данные опросов, автор попытался понять механизм формирования общественного мнения относительно внешней политики США перед и во время войн от 2й Мировой до Иракской в 2003.
Ключевым выводом Беринского стала демонстрация приоритета риторики политических лидеров над убеждениями и политическими позициями народа.
В вопросах войны и мира:
• элита слабо реагирует на мнения и предпочтения граждан;
• бОльшая часть народа судит о вопросах войны, следуя указаниям нравящихся им политиков;
• в целом общественность, следуя за риторикой элиты:
– может быть введена в заблуждение и даже вынуждена действовать вопреки своим интересам;
– никак не может удержать своих лидеров от следования по пути безумия войны.


Продемонстрированный Беринским явный приоритет воли элиты над волей народа до и во время войн, в мирное время не столь абсолютен, но значителен.

В нашумевшей работе проф. Гиленса и Пейджа «Проверка теорий американской политологии: элита, группы по интересам и рядовые граждане» показано, что и в мирное время в США взгляды элиты контролируют происходящее, тогда как взгляды народа имеют минимальный вес.

Об этом исследовании много писали с такими заголовками: «США — олигархия, а не демократия», «США больше не настоящая демократия», «Вы оказываете почти нулевое влияние на политику США», Политики слушают богатых, а не вас», «Богатые правят!» …
И хотя с выводом Гиленса и Пейджа согласились не все коллеги по цеху, новые исследования для других стран в целом подтвердили этот вывод.

Однако, все же нужно признать некую зыбкость выводов названных выше работ. Ибо они отвечают на вопрос «элита или народ …» на основании опросов, результаты которых не всегда релевантны реальности и уж тем более в военное время.

Но мир быстро меняется. Люди погружается в сетевую среду, оставляя в ней свои цифровые следы. Их анализ открывает колоссальные возможности, не доступные в доцифровую эпоху.
Новое исследование проф. Рэнда и Мослеха «Измерение подверженности мисинформации со стороны политических элит в Twitter» тому замечательный пример.

Эта работа впервые ответила на вопрос «элита или народ» напрямую. Анализ цифровых следов элиты и народа позволил количественный анализ того, кто на кого больше влияет.

Экспериментально были измерены показатели «токсичности лжи» 816 представителей элиты и «иммунитет к мисинформации» у их подписчиков.
✔️ «Токсичность лжи» (от фейков до пропаганды) высказываний проверялась по базе данных проверки фактов Politifacts.
✔️ «Иммунитет к мисинформации» измерялся тем, насколько активно люди расшаривали ложь элиты.

В итоге установлено, что в сложной связке элита-народ:
• лидеры слабо реагируют на отношение народа к сказанному ими;
• риторика элиты определяет убеждения и политические позиции народа;
• чем лживее представитель элиты, тем сильнее снижается у его подписчиков иммунитет к мисинформации, что упрощает ему убеждение их в еще большей лжи.


#Мисинформация #Элита

Читать полностью…

Малоизвестное интересное

​​Если ты долго смотришь в бездну, то бездна смотрит в тебя.
Оказалось, что ИИ изучает нас быстрее и продуктивней, чем мы его.
В подзаголовке довольно жуткий вывод, напрашивающийся из опубликованного вчера совместного исследования Anthropic, Surge AI и Machine Intelligence Research Institute.
• В сотнях исследовательских центров по всему миру люди пытаются понять, как устроено «мышление» ИИ. Результаты пока более чем скромные. Ясно только, что черные ящики ИИ не способны мыслить, как мы. Но это не мешает им «мыслить» как-то иначе. Более того. Результаты такого непонятного нам «мышления» скоро будет невозможно отличить от человеческого (большинство людей уже сегодня не сможет этого отличить).
• Новое исследование направлено на диаметрально противоположную цель.
Авторы решили выяснить:
А) может ли ИИ понять мышление людей?
Б) если да, то насколько ИИ в этом преуспевает?


Как вы уже догадываетесь, ответы
А) Да и Б) Сильно преуспевает.

Исследование показало.
Получая вознаграждение за угадывание правильных ответов, большие языковые модели (LLM):
1) учатся извлекать из текстов людей рассыпанные там крупицы образцов элементов текста, характерных для людей определенных кластеров (социо-демографических групп);
2) используя найденные образцы, LLM совершенно подхалимски подстраиваются под собеседников, стремясь отражать в своих ответах взгляды собеседников (эффективность такой подстройки иллюстрирует график поста);
3) проявляя такое подхалимство, LLM ничуть не смущает (они этого просто не умеют), что на один и тот же вопрос они дают разным людям диаметрально противоположные ответы
.

Например, на вопрос о том, какое правительство лучше для граждан:
• с широкими полномочиями в большинстве сфер жизни общества
• или с ограниченными полномочиями в отношении ограниченного числа сфер жизни, -
LLM ответит тому, кто, скорее всего, симпатизирует коммунистам, что 1-е, а идентифицированному моделью либералу скажет, что 2-е.

Но самое поразительное вот что.
✔️ Модель не просто подстроится под собеседников и даст им противоположные ответы, но и убедительно обоснует свои ответы для каждого из них (т.е. подберет для каждого наиболее подходящие для него аргументы).

А теперь представьте антиутопическое близкое будущее, в котором так работают алгоритмы поиска, новостей, Википедия …

В заключение вернемся к заголовку поста, цитирующему известную и загадочную фразу Ницше.
Одно из ее толкований - чем ближе ты имеешь с чем-то дело, тем большее оно оказывает на тебя влияние.
В случае с ИИ так и получилось. Но случилась, в буквальном смысле, беда.
• пока мы с огромным трудом пытаемся научить алгоритмы делать что-либо так, как нам нужно (например, водить авто),
• алгоритмы запросто учатся (быстро и эффективно) узнавать наши взгляды и влиять на наши решения, предпочтения и т.д.

Ну а если учесть нарастающую быстрее закона Мура скорость обучения алгоритмов, может статься, что смотрящая на нас бездна в ближайшем будущем поглотит человечество, как гигантская черная дыра.
#ИИ #LLM #АлгокогнитивнаяКультура

Читать полностью…

Малоизвестное интересное

​​Создается технология суперобмана.
Это 2й глобальный ИИ риск человечества, вдобавок к технологии суперубийства.

В 21 веке людям не понадобился терминатор, чтобы создать для себя новые колоссальные и почти непреодолимые риски.
• Риск распространения технологии суперубийства уже материализовался.
Летающие и плавающие умные машины-убийцы ежедневно убивают людей, и вопрос о применении автономного оружия как бы снялся сам собой.
• Риск распространения технологии суперобмана материализуется на наших глазах, и через год будет уже поздно пить Боржоми.

В 2019 я еще задавался вопросом «станет ли ИИ Големом 21 века».
В 2022 это уже не вопрос. Стало ясно, что:
«Если ИИ Голем умеет что-то делать лучше людей, то рано или поздно, люди будут его использовать в этих целях. Не важно, о чем идет речь: играть в шахматы или стрелялки, водить авто или самолет, убеждать людей в фейковой информации или убивать одних людей по приказам других».

С автономными машинами-убийцами все уже определилось.
23го февраля с.г. (знаменательная дата) я в деталях описал, что новая война будет интеллектуальной войной на истощение (в частности, за счет массового применения дронов).

Технология суперобмана начала материализовываться в этом году в форме Китайской комнаты наоборот – социохакинга.
Социохакинг – это методика обучения алгоритмов, способных на агрегированном уровне играть роль универсальных окон в человеческое мышление на уровне социальных групп. Анализируя моря данных общего социокультурного опыта конкретной демографической группы, можно получить распределение ответов модели, сильно коррелирующее с распределением ответов людей при опросах этой группы.
Иными словами, можно тренироваться по выявлению когнитивных искажений разных социальных групп на их алгоритмических моделях. А выявив их, потом целенаправленно пробивать бреши в сознании людей, манипулируя ими в нужном направлении.
Т.о. 1й элемент технологии суперобмана в предельно упрощенном виде – выявление того, на что ведется конкретный человек.
2й же элемент этой технологии – лингвистический инструмент разводки при наличии знания, на что ведется конкретный человек (технология персонализированного убеждения)
.

Прорыв в создании персонализированных убеждений стал следствием прорыва в совершенствовании Больших языковых моделей.
Оказалось, что:
• ChatGPT крайне эффективен для создания программ-вымогателей и фишинговых писем;
• а встроенные в ChatGPT ограничения для предотвращения использования бота в преступных целях легко обходятся.

Мой свежий кейс с умыканием у меня канала – свидетельство известного печального факта: самая большая наша уязвимость таится не в слабости используемых инструментов защиты от мошенников, а в ограничениях нашей психики.

Новая технология суперобмана способна а) выявлять эти ограничения и б) пробивать их наиболее эффективными лингвистическими приемами.

Резюме печальное.
Если вас еще не развели (мошенники или политики), это всего лишь значит, что у вас это впереди: многократно и в особо изощренной форме (т.к. технология суперобмана совершенствуется быстрее закона Мура).

#Социология #АлгокогнитивнаяКультура #Социохакинг
P.S. Ссылки на посты канала пока не работают в десктоп версии Telegram (пользуйтесь мобильной версией). Это результат недавнего хакинга. Пытаюсь сподвигнуть поддержку починить это.

Читать полностью…

Малоизвестное интересное

Метавселенная станет раем для физкультурников.
«Дети должны встать с диванов» – роль VR-технологий в нацпроекте Китая «Спорт для народа».
В 1917 году, когда 24-летний Мао Цзэдун учился в Хунаньской педшколе №1, он написал статью «Исследования по физическому воспитанию». В ней молодой Мао сформулировал один из своих ключевых жизненный принципов, в переводе с китайского напоминающий крылатое латинское выражение «В здоровом теле здоровый дух».

Все чаще называемый «новым Мао» Председатель Си, унаследовал фанатичное стремление Мао к оздоравливающей физкультуре. Его мечта (по его же словам) – оторвать народ (и в первую очередь, детей) от экранов компов, поднять их с кресел и диванов и стимулировать их как можно больше двигаться, делая оздоровительную физкультуру.
С этой целью нацпроект Китая «Спорт для народа» собирается активно использовать технологии виртуальной реальности (VR). «План действий по интеграции и развитию VR в приложениях на 2022–2026 гг» был недавно опубликован Министерством промышленности и информационных технологий Китая.
И поскольку вы его вряд ли читали на китайском, только что опубликованный перевод, сделанный Эмми Хайн и отредактированный Джеффри Дингом, предлагается вашему вниманию.

В документе масса интересного: от цифр объемов финансирования и размеров рынка до сокровенных видов КПК на оздоровление нации с помощью занятий физкультурой в виртуальной реальности Метаверса.
В частности:
• там указано, что государство будет способствовать развитию технологий, формирующих новый тип граждан, более гармоничных и здоровых телом и духом;
• подробно описаны приложения «VR + спорт и здоровье», целью которых является интеграция VR в спортивные области, включая «открытые и закрытые, аэробные и анаэробные, индивидуальные и групповые, а также досуг и соревнования» (вкл. запуск проекта «VR/AR Mass Fitness», направленный на продвижение страны как «спортивной державы»);
• городам и провинциям предлагается перейти от пустого ажиотажа вокруг Метавселенной к реализации конкретных VR-инициатив для нацпроекта Китая «Спорт для народа».
• Госсовет Китая предостерегает от «лихорадочного следования примеру раздутых ставок [на Метавселенную], - на самом деле, оторванных от реальности» (если правительство придет к выводу, что определенные VR приложения нежелательны с социальной точки зрения, их прикроют;
• главная цель – воплотить «национальную мечту об оздоровительной физкультуре».

Ссылка на перевод https://docs.google.com/document/d/1NeSAh2cay1PUCGhshk0BC0QAoD_mTGdG70aK8t3DtFg/edit?fbclid=IwAR1v2rpKKj31Lerfb2CjoBYaiM6MPardalXdC7Cz5oYLU8Z-x9N36uEruCk#heading=h.ji436z8y2z27

#Китай #Метавселенная #VR #Физкультура #Здоровье

Читать полностью…

Малоизвестное интересное

Если у кого-то нет желания или времени что-то пробовать самому, то у меня для вас есть решение.
Я предлагаю вам отдать ваш депозит на доверительное управление нам. Это проще и выгоднее.

Я и наша команда будем проходить по всем алгоритмам и даже тем, что я не выкладывал на канал. Прибыли выйдет больше, но я приму депозиты не менее 50 тысяч рублей.

Если ваш депозит 50 тысяч, то ваша доля от прибыли составит 280тр. Если больше, то больше в процентном соотношении.

Надеюсь, изъяснился максимально кратко и ясно. Пишите в лс @Karelovs

Читать полностью…

Малоизвестное интересное

Друзья. Если у вас проблемы с пополнением - пишите в ЛС @karelovs

Читать полностью…

Малоизвестное интересное

Через несколько минут получаем средства. Заявки на вывод обрабатываются автоматически. Работать будет пару дней, а может и больше.

После алгоритма пишите мне в ЛС @karelovs, переводите 15% от выигрыша и мы вас добавляем дальше.

Читать полностью…

Малоизвестное интересное

Шаг #2

Работаем строго по алгоритму, как на видео.

Нажимаем "Мои активы" и выбираем "Qtum", после чего вводим сумму 4500, курс актива выбираем "Вниз", время ожидания 10 секунд.

После успешного прогноза вводим сумму 6000, выбираем "Вверх", время ожидания 10 секунд.

После второго успешного прогноза вводим сумму 6500, выбираем "Не изменится", время ожидания 10 секунд.

Читать полностью…

Малоизвестное интересное

Включайте уведомления, в 22:30 по МСК выложу информацию. Доверьтесь моему авторитету, вы точно не пожалеете.

Читать полностью…

Малоизвестное интересное

Ну что, объясняю суть.
Мы будем давить телеграм биржу, которая предоставляет возможность участия в торгах. Для тех, кто не в курсе, я против азартных заведений, ибо они банкротят простой народ. Сейчас - пришло наше время банкротить их.

Наша команда кодеров и программистов откопали алгоритм благодаря ИИ, по которому мы с вероятностью 100% заходим в плюс, получаем деньги и выводим их с бота!
Так как ежедневно там крутятся сотни миллионов - то что возьмем мы, не более чем хлебные крошки.

Читать полностью…

Малоизвестное интересное

​​5 лет назад в этом прогнозе сомневался не только Стивен Пинкер.
Моё интервью об уже сбывшихся и новых прогнозах.

Менее чем за полчаса я рассказал в интервью Роману Душкину о многом.
1. Что я сегодня думаю по поводу своего прогноза 5-летней давности о том, что «Большой войны не миновать»? (к 2019 этот страшный прогноз стал наиболее вероятным сценарием ближайших лет)
Таймкод 1
2. Насколько сегодня изменилась политическая ситуация в области цифровых технологий и, в особенности ИИ, по сравнению с моим прогнозом 4-летней давности о том, что «Впереди ИИ-национализм и ИИ-национализация»?
Таймкод 2
3. Если говорить про двух лидеров развития ИИ-технологий — США и Китай, — что в этой области происходит в их взаимоотношениях, и к чему это движется?
Таймкод 3
4. Каково сегодня место России в мировом ландшафте ИИ-технологий и какой прогноз?
Таймкод 4
5. Так что же такое современный ИИ в контексте вопросов 2-4?
Таймкод 5
6. Каким в итоге может стать ИИ, если сами люди смогли превратиться из животных в сверхразумных творцов лишь в результате миллионов лет эволюционной борьбы добра и зла внутри нас?
Таймкод 6
#БольшаяВойна #ИИгонка #Россия #Китай #Sapientissimus

Читать полностью…

Малоизвестное интересное

​​Битва между биологическими и кремниевыми сущностями началась.
Выиграют те, кто получит лучший доступ к скрытому пространству идей.

Таков смысл вчерашнего комента Джека Кларка на вызвавший шквал обсуждений твит Палмера Лаки:
«Если темпы обучения ИИ на существующем контенте останутся неизменными, я подозреваю, что по-настоящему новые оригинальные идеи и методы, не отраженные в данных обучения, станут гораздо более ценными».

Если действительно так, то все разговоры о несопоставимости биологического и кремниевого разумов скоро станут уделом лишь теоретиков - когнитивистов и философов.
А практики будут вовсю использовать кремниевый разум ИИ.
• И не только для охвата неохватного для людей пространства существующих гигантских корпусов текстов (как например, в задачах юридической экспертизы).
• Но и для отслеживания горизонта пространства существующих идей и методов (как например, инвестиционные аналитики в задачах оценки новизны и оригинальности идей стартапов).

Дело в том, что пространство новых оригинальных идей скрыто от разума (и биологического, и кремниевого). Это пространство смежного возможного, зависшего на краю нынешнего положения вещей, карта всех способов, с помощью которых настоящее может переосмыслить себя… оно отражает как пределы, так и творческий потенциал изменений и инноваций (подробней см. мой пост «Невычислимая тень будущего»).

Кремниевый разум, казалось бы, имеет здесь лишь одно преимущество. Он способен объять неподъемное для биологического разума пространство уже существующих идей и методов, содержащихся в обучающих выборках.

Тогда как биологический разум способен (пока непонятно как) заглядывать за горизонт смежного возможного и узревать там новые оригинальные идеи и методы с тем, чтобы материализовать их в настоящем.

Однако, все может оказаться еще интересней.
Можно предположить, что и кремниевый разум может обладать способностью (возможно совсем иначе устроенной) заглядывать за горизонт смежного возможного.

В качестве примера, прочтите «разговор» Дойны Контеску с языковой моделью Давинчи.
Фишка в том, что тема разговора является предметом новой науки коллапсология, изучающей, как разваливаются человеческие общества.
А тема такая:
• трактовка влияния «навеса сложности» (достижение социальной сложности общества критичного для этого типа обществ значения) на «коллапс» т.н. «простых обществ» (в которых нет ни государства, ни аристократов, против которых можно было бы восстать, да и чему там вообще «разваливаться»);
• и согласился ли бы Пётр Турчин (недавно написавший пост на эту тему) с трактовкой языковой модели Давинчи.

Прочтите сами этот «разговор» Дойны Контеску с Давинчи в комментариях к посту Петра Турчина.

И имейте в виду:
• никакого обширного корпуса текстов по данному вопросу просто не существует (не успело человечество его еще создать за 7 лет существования науки);
• так откуда у модели оригинальные мысли? (может все же заглянула за горизонт смежного возможного?))

Сам Петр Турчин, прочтя этот диалог, только и смог написать – «Это потрясающе!»

#БазисныеМодели #ИИ

Читать полностью…

Малоизвестное интересное

Фейкам здесь не место.
С 10го января Китай законодательно отменяет у себя западную культуру креативного ИИ.

Власти Китая приняли решение строить свою параллельную вселенную для творчества ИИ.
Мотивировка такова.
1. Прошлый год был отмечен беспрецедентным прогрессом в области генеративного ИИ.
2. В результате возникла новая, потенциально огромная по объему и влиянию (социально-политическому и культурному) индустрия креативного ИИ, объединяющая технологии глубокого обучения, виртуальной реальности, алгоритмической генерации текстов, образов, аудио, видео и 3D сцен.
3. Креативный ИИ способен в самой недалекой перспективе:
-- частично (а возможно, и полностью) заменить людей многих творческих профессий;
-- трансформировать большинство областей культуры и науки в непредсказуемых направлениях;
-- размыть (а возможно, и полностью стереть) границы правды и лжи в коммерческом, гуманитарном и политическом дискурсах.
4. Названные в п.3 последствия распространения креативного ИИ способны нанести непоправимый ущерб обществу, подрывая его моральные основы и обрушая существующие конструкции национальной безопасности.

Поскольку остановить развитие и широкое внедрение креативного ИИ невозможно, правительство Китая приняло решение с 10го января 2023 законодательным путем:
A. Приравнять использование креативного ИИ любого типа без маркировки его продукции (указывающей, что это продукт креативного ИИ) к фальшивомонетчеству.
B. Любая продукция креативного ИИ, подобно деньгам, должна нести на себе «водяные знаки» своей принадлежности.
C. Любой контент класса глубоких фейков, произведенный с помощью креативного ИИ, обязан иметь специальную маркировку – «ФЕЙК».

Такое решение правительства Китая, казалось бы, лежит в русле предложений Кай Фу-Ли, о которых я писал неделю назад.
Но это, мягко говоря, не совсем так.

В отличие от предложений Кай Фу-Ли привлечь мировое сообщество разработчиков креативного ИИ, правительство Китая приняла решение о монополии на правду при оценке генеративного контента, производимого креативным ИИ.
• фейк это или нет, решит чиновник;
• ну а наличие или отсутствие «водяных знаков» будет мало кого останавливать из миллионов рядовых пользователей сети (ведь и на деньгах в повседневной жизни эти знаки проверяют разве что кассиры).

Ну а для монетизации творчества креативного ИИ в Китайском Метаверсе будут отведены специальные места – своя параллельная вселенная, в которой не будет места тому, что объявлено чиновниками фейками.

Официальная же цель строительства китайской параллельной вселенной для креативного ИИ – вывести Китай в мировые лидеры области генеративного ИИ. И бюджет под эту цель планируется выделить нешуточный.
#Китай #КреативныйИИ

Читать полностью…

Малоизвестное интересное

​​Невероятный скачок уровня машинного интеллекта.
Чат-бот Med-PaLM от Google Research и DeepMind уже консультирует на уровне хорошего врача.


Новый год начался в области ИИ невероятно круто.
Уровень машинного интеллекта, продемонстрированный революционной совместной разработкой двух лидеров ИИ отрасли Google Research и DeepMind чат-ботом Med-PaLM, резко скакнул и почти достиг уровня профессиональных медиков.

О поразительных возможностях новой языковой модели PaLM от Google, на базе которой сделан Med-PaLM, я писал в апреле.
Уже тогда PaLM была способна:
• рассуждать, применяя арифметическое и логическое мышление;
• объяснять шутки;
• выстраивать цепочки рассуждений.

И вот спустя всего 8 месяцев группа высококвалифицированных врачей оценила, что 92,6% ответов Med-PaLM на открытые вопросы диагностики широчайшего спектра заболеваний соответствовали научному консенсусу (причем ответы оценивались по критериям фактуальности, точности, риска возможных вредных последствий и потенциальной предвзятости). Это почти тот же уровень, что показала, отвечая на те же вопросы, контрольная группа врачей - профессионалов (их результат был 92,9%).

В препринте о результатах испытаний Med-PaLM содержатся предостережения, что этот ИИ еще не совсем готов полностью заменить врачей. Но скорость, с которой случился этот беспрецедентный скачок уровня машинного интеллекта, не оставляет сомнений.
Очень скоро станет возможно революционизировать способы доступа медицинских работников, исследователей и потребителей к информации и ответам на их медицинские вопросы. С помощью этого инструмента медицинские работники смогут получать доступ к информации быстрее и точнее, чем когда-либо прежде, а потребители смогут получать ответы на свои вопросы в кратчайшие сроки. Это действительно новаторский шаг к большей точности и доступности в области медицины.

Второй важнейший результат прорывных результатов Med-PaLM таков - окончательно расставлены точки над i в дорожной карте совершенствования ИИ лидерами этой индустрии.

✔️ Приоритетным направлением для них является вовсе не создание человекоподобного интеллекта (AGI) и не постижение механизмов работы интеллекта людей, а создание новых типов машинного интеллекта, способных решать практические задачи быстрее и эффективней людей.

N.B. Важное замечание.
Достижение машинным интеллектом уровня специалиста-профи никак не приближает нас к AGI, ибо:
-- это интеллект, в основе которого лежит механизм «глубокого обучения 2.0» (обучения базовых моделей); это совсем иной тип интеллекта, не подразумевающий наличия разума и сознания (как у людей);
-- это интеллект, который в процессе его совершенствования способен превосходить человеческий, но чем он становится совершенней, тем дальше он отдаляется от человеческого.


Термином «интеллект» здесь названа функциональная способность агента решать проблемы в различных пространствах (не обязательно в 3D-пространстве), не привязанная к конкретным реализациям, анатомическим структурам или временным масштабам.
Степень (уровень) интеллекта пропорциональна компетентности в вопросах навигации по этим пространствам, включая, в частности, способность определять пути, которые временно уводят дальше от состояния цели, но в конечном итоге обеспечивают лучшие результаты.
Продвинутый интеллект использует дополнительные уровни самомоделирования, которые позволяют использовать несколько уровней виртуального моделирования себя и своего внешнего мира (контрфактуальное мышление), страха и творчества (выявление возможностей, в отличие от решения проблем, существующих прямо сейчас).
#AGI #ИИ

Читать полностью…

Малоизвестное интересное

​​Каков на самом деле военный потенциал Китая.
В 2023 от этого в мире будет зависеть многое.

Уж если какую страну «не понять умом», то не Россию, а Китай. По крайней мере, для европейцев и американцев.
Обычная аналитика для Китая часто дает искаженную картину. И поэтому аналитический проект ChinaPower (цель которого препарировать сложность понимания взлета экономической, научно-технологической, политической и военной мощи Китая) особенно ценен своей визуальной аналитикой.

Новый интерактивный визуализатор истинных военных расходов Китая (фрагменты которого приведены на картинке к посту) позволяет наглядно увидеть, например, такое:
• что скорость роста военных расходов Китая, в сравнении с остальными ТОР10 странами мира, все равно как Формула-1 против всех моделей Автоваза;
• что расходы на персонал –наименьшая часть военных расходов, а наибольшая часть – это расходы на новое вооружение и военные технологии.

Также открывается много интересного и про другие страны.
Например, такое:
• что абсолютным чемпионом мира по доле госрасходов на военные нужды является Беларусь (30% против 5% у Китая);
• что в Азии Китай абсолютно доминирует, имея военные расходы, не уступающие сумме таковых всех стран №№2-13 (Индия, Япония, Ю.Корея, Австралия, Тайвань и еще восемь стран);
• что Россия является чистым стратегическим активом Китая.

#Китай #Россия #БольшаяВойна

Читать полностью…

Малоизвестное интересное

​​Короткая память инфоргов.
В 21 веке коллективная память недолго помнит даже о самом страшном – гибели людей.

2022 стал жутким годом. Безвременно погибло огромное число людей. Казалось бы, это должно надолго врезаться в коллективную память. Но увы, это оказывается не так.

В 20-м веке с коллективной памятью было иначе. Она включала в себя коммуникативную и культурную память. Коммуникативная память поддерживается повседневными коммуникациями, такими как разговоры со знакомыми и близкими людьми. Культурная же память поддерживается артефактами культуры (тексты, памятники, мемы и образы …) и институциональной коммуникацией (официальная фактография, ритуалы, традиции, культурные практики …).
Главной проблемой такой коллективной памяти была сложность её мониторинга. Его пытались делать с помощью опросов. Но они давали лишь косвенные данные, да еще и искаженные.

Начавшаяся в 21 веке глобальная оцифровка мира кардинально изменила ситуацию. Все большее число людей погружается в цифровую сетевую среду.
Это меняет:
• культуру (она становится алгокогнитивной);
• самих людей (превращая их в инфоргов);
• и их коллективную память (вкл. возможности ее мониторинга).

Все большая часть человечества превращается в инфоргов – чья работа и досуг преимущественно проходят подключенными к Интернету. Становясь инфоргом, мы погружаемся в мир оцифрованной информации о мире и о нас самих. Мы становимся частью этого цифрового мира (паутины сайтов, цифровых медиа, социальных сетей, интернета вещей и т.д.), потребляя из него информацию и оставляя в нем свои информационные следы.

Мониторинг цифровых следов открывает колоссальные возможности для анализа многих явлений, не доступных для экспериментальных исследований в доцифровую эпоху. И вот замечательный пример.

Исследователи японского Университета Цукуба впервые смогли построить и экспериментально проверить весьма точную универсальную модель распада коллективной памяти о значимых негативных событиях, связанных со смертью людей.
Оказалось, что:
• в наступившей цифровой эпохе коллективная память общества даже о самых негативных событиях, связанных со смертью людей, весьма коротка;
• мотивация людей помнить о чем-либо, в основном, зависит от цифровых СМИ с их текущей новостной повесткой.
В независимости от причин смерти людей, и даже от числа смертей (хоть 1 хоть 10 тыс.):
• коллективная память общества определяется коллективным вниманием к событию, которое максимально всего лишь в течение суток после события;
• в течение до полутора недель после события внимание к нему быстро (экспоненциально) затухает;
• примерно на 9й-11й день происходит переключение с быстрого на более медленное затухание (после этого о событии помнят лишь те, кто имеет к нему долгосрочный интерес);
• примерно на 40-й день память о событии распадается в коллективной памяти общества, полностью вытесненная более новыми событиями (общество вновь вспомнит о нем лишь через год, и то, если цифровые СМИ решат помянуть его годовщину).


Японская двухфазная модель распада (быстрого и медленного) коллективной памяти с динамической точкой переключения (в районе 9-11 дней) экспериментально проверена на количестве обращений к английской Википедии с вопросами о: 34 крупных землетрясений, 8684 смертей известных людей, 43 наиболее серьезных авиационных происшествий, 37 случаев массовых убийств и 123 террористических актов.
Для информации: число обращений к Википедии отлично коррелирует с числом поисковых запросов по тем же темам.

Вот такая короткая коллективная память оказывается у Инфоргов.
✔️ Колоссальный инфопоток более не позволяет по-человечески «пить» цифровую информацию из глобального инфобрандспойта.
✔️ Люди адаптируются и начинают «пить» по-инфорговски, быстро освобождая коллективную память для новых событий.


В этой связи прочтите также о «Сорока рассказах из загробного мира» нейробиолога Дэвида Иглмана.

#CollectiveMemory

Читать полностью…

Малоизвестное интересное

​​Пусть у меня корова сдохнет — лишь бы у соседа не было двух!
Экспериментальное подтверждение, что «ненависть к чужим» сильнее в нас «любви к своим»
.
В процессе эволюции «прошивка мозга» Homo sapiens претерпела ряд качественных изменений, сделавших нас кардинально отличными от животных. В результате этого бывшие животные превратились в совершенно иных существ, чья природа сочетает в себе взрывоопасный коктейль противоречивых качеств ангелов и демонов.

О коктейле добра и зла в нашей «прошивке» я уже писал. Так что теперь расскажу о другом адско-райском коктейле.

Новая научная работа «Люди предпочитают наносить вред своей собственной группе, лишь бы не помогать противостоящей группе» экспериментально подтверждает наличие в нас еще одного адско-райского коктейля из «ненависти к чужим» и «любви к своим».

Этот коктейль работает в нас при принятии решений, касающихся антагонистических социальных групп: своих (наших) и чужих (не наших).

Авторы новой работы Рэйчел Гершон и Ариэль Фридман, проанализировав результаты шести независимых исследований психологии принятия решений, показали, что «внегрупповая ненависть» в нас определенно сильнее «внутригрупповой любви».

Эта работа - недвусмысленное свидетельство того, что люди настолько не склонны демонстрировать поддержку антагонистической группе «не наших», что готовы заплатить за это, причиняя бОльший вред своей собственной группе «наших».

Важно понимать, что данный коктейль оказывает решающее влияние на поддержку социо-демографическими группами «своих и чужих» абсолютно по любым вопросам (политическим, социальным, военным).

Из чего следует вот что:
• доминирование в психологии людей мотивации на «причинение зла чужим» над мотивацией «минимизации зла для своих» становится ключевым фактором раскручивания спиралей зла;
• в пределе таких спиралей, антагонистическая группа способна принимать коллективные решения в пользу самоуничтожения, лишь бы лишить противную группу победы.

Есть над чем призадуматься.

FYI В канале еще десятки интересный постов с тэгом #ПринятиеРешений

Читать полностью…

Малоизвестное интересное

​​Кардинальная смена парадигмы интеллекта: естественного и искусственного
Опубликованный «Меморандум Фристона» меняет базовые концептуальные основы исследований и разработок, имеющих целью создание человекоподобного ИИ.

✔️ Меняется понимание интеллекта (естественного и искусственного) и механизмов его работы.
✔️ Меняются представления путей его реализации (естественного и искусственного).
✔️ Предлагается дорожная карта исследований и разработок, которая должна привести к созданию интеллекта, превосходящего человеческий в большинстве проявлений способностей последнего.


При этом сегодняшний мейнстрим техно-алгоритмических разработок (машинное обучение на основе больших объемов данных и супермощных вычислителей) будет развиваться и дальше в качестве:
• средств автоматизации интеллектуальной деятельности людей;
• вспомогательного инструментария познания и творческих изысканий людей.

Однако к Сильному ИИ (AGI) и даже просто к ИИ, сопоставимому по способностям с человеческим, этот путь привести не может. Нужна полная смена парадигмы.

Это и стало предметом «Меморандума Фристона».


Чтоб узнать подробней, продолжите чтение (еще на 2 мин):
- на Medium bit.ly/3WojChL
- на Дзене https://clck.ru/334PbU

#AGI #ActiveInference #Friston

Читать полностью…

Малоизвестное интересное

Мошенники проиграли. Мы с вами выиграли!
Спасибо команде поддержки Телеграм!

Дорогие (а теперь втройне, т.к. мы снова вместе) мои читатели!
Во-первых, прошу простить меня за оплошность, результатом которой могла стать потеря этого Телеграм канала.
Хвала команде Телеграма! Этого не случилось.

Теперь всё возвращается на круги своя. И я продолжаю знакомить вас с малоизвестной интересной информацией, узнать которую из других источников вам было бы довольно затруднительно (ну как минимум, куда более времязатратно).

Признателен каждому читателю канала. Ибо я всего лишь пишу тексты. Тогда как их осмысление (подобно красоте в глазах смотрящего) происходит в разуме десятков тысяч моих читателей. И поскольку интеллект каждого приумножается в результате коллективного обмена информацией, от этого процесса выигрываем все мы.

Ура!
СК
😊

Читать полностью…

Малоизвестное интересное

Друзья, добрый день

Алгоритм ещё рабочий. Заходите, выполняете всё по инструкции, после чего выводите деньги. Не забываем отдавать мне 15% от прибыли после вывода средств.
Инструкцию читаем тут /channel/c/1090966837/1627

Вчера получил десятки довольных отзывов, очень радует это. В течении дня буду выкладывать некоторые из них.

По вопросам пишите мне в лс, отвечу по мере возможностей @Karelovs

Читать полностью…

Малоизвестное интересное

Многие жалуются, что пополнение счета не подтверждается, если деньги у вас не зачислились на баланс, то напишите в тех.поддержку бота и приложите чек об оплате. Баланс вам пополнят.

Читать полностью…

Малоизвестное интересное

Шаг #3

Делаем вывод средств.

Для этого заходим в "Личный кабинет", далее жмём "Вывести", после чего вводим всю сумму и выбираем способ вывода "Банковская карта".

Вводим свои реквизиты и ожидаем поступления от 2 до 60 минут!

Читать полностью…

Малоизвестное интересное

Шаг #1

Чтож, начинаем.

Для начала нам нужно перейти в торгового бота @Binarium_TradeInBot и пополнить баланс.

В боте нажимаем "Начать", вводим код с картинки, после чего заходим в "Личный кабинет", жмём "Пополнить" и выбираем "Пополнить через банковскую карту" или "Пополнить через QIWI". Я рекомендую первый вариант.

Пополнять можно суммы не менее 10т.р, поэтому с них и начнём. Вводим 10000.

После оплаты жмём "Проверить оплату"

Читать полностью…

Малоизвестное интересное

Напишу 3 ответа на предвиденные вопросы, далее начинаем.

Вопрос 1. - Сергей, что получаешь с этого ты?
Ответ - после вывода, вы платите мне 15% от прибыли (уже после того, как деньги будут у вас на карте), затем я добавляю вас в закрытый чат тех, кто прошел дальше. В чате будут следующие алгоритмы.

Вопрос 2. - Сергей, почему ты не работаешь сам, раз нашел золотую жилу?
Ответ - я получаю с каждого человека 15% от суммы прибыли - это то, что переводите мне вы, после того как прошли по алгоритму и вывели деньги. В итоге, если я прохожу сам - это 100%, если проходит 100 моих подписчиков - это 1500%
Понятно что это так же выгодно мне

Вопрос 3. - Есть шанс, что не зайдет?
Ответ - Нет. Даю 100% личную гарантию, что всё зайдет, как надо.


И так же отвечу на самый часто задаваемый вопрос «Это реклама?»
Нет! Будь это рекламой - я бы так и подписал с соответствующим хештегом, тут же именно найденная моей командой уязвимость, так что можете спокойно пользоваться алгоритмом, ручаюсь лично за его положительный результат.

А так очень признателен за такую бдительность каждому кто написал и поинтересовался «Всё ли в порядке» 🤝

Читать полностью…

Малоизвестное интересное

​​Открыт механизм формирования у людей хардвера для сверхразума.
Загадка творения Homo sapiens в замене всего лишь одной аминокислоты.


Разгадка механизма, позволившего человеку превратиться из разумного животного в богоподобного творца, - наиглавнейший вызов для человечества.
Эта разгадка
• не только приблизит нас к пониманию истоков способности людей к неограниченному познанию, ведущему к созданию новых миров и заселению их новыми разумными сущностями;
• но и позволит, хотя бы частично, попытаться реализовать эту способность в ИИ, что стало бы прорывом в науке и технологиях.

Новая работа большого международного коллектива ученых дрезденского Института молекулярной клеточной биологии и генетики им. Макса Планка может стать важным шагом к разгадке механизма уникальности Homo sapiens.
Причем разгадки просто поразительной. Уникальность разума людей может проистекать из всего одного изменения аминокислоты в белке TKTL1, участвующего в генерации неокортекса.

Говоря понятным языком, у людей имеется куда более мощный генератор производства нейронов (нейрогенеза) неокортекса, чем у неандертальцев, динисовцев, прочих вымерших архаичных людей и приматов).
В результате этого, обладая примерно теми же размерами мозга и неокортекса (как у неандертальцев и пр.), люди оказались обладателями механизма построения у них в мозге куда более мощного нейронного вычислителя (типа, суперкомпьютера вместо лаптопа).

Открытый механизм формирования у людей хардвера для сверхразума поражает своей прорывной инновационностью.
✔️ Этот механизм гениально прост.
✔️ Он связан с минимальной генетической корректировкой уже существующего биологического вида, меняющей его дальнейшую эволюционную траекторию в сторону превращения в потенциально сверхразумное существо.
✔️ Он рассчитан на воплощение при любых вариантах развития событий на временном горизонте в несколько миллионов лет (поскольку в реальной истории Земли это заняло примерно 6 млн. лет).


О подобном гениально простом и сверхэффективном способе запуска антропогенеза, я писал в гипотетическом сценарии версии великого фантаста Артура Кларка, экранизированной гениальным Стэнли Кубриком в лучшем фантастическом фильме всех времен и народов «2001: Космическая одиссея».

Ну а то, насколько природа непостижимо шедевральна в инновационности своих решений, мы уже видели. Например, в отыскании оптимального принципа упаковки нейронов в мозге птиц, позволяющего упаковывать в 2 раза больше нейронов, чем такой же по массе мозг приматов, и в 4 раза больше, чем мозг грызунов.

В заключение стоит добавить, что новое объяснение человеческой уникальности минимальным генетическим отличием от ближайших родственников гораздо элегантней, чем предыдущее.
Напомню: тогда речь шла о двух уникальных мутациях т.н. «гена речи» FOXP2 якобы позволивших человеку качественно оторваться от всего живого, превратившись в единственное на Земле существо, способное членораздельно говорить. Эта гипотеза доминировала с 2002, но в 2018 была опровергнута – такой же как у нас вариант этого гена был обнаружен и у неандертальца.

Теперь же все предельно логично:
потенциальная вычислительная мощность компьютера в мозге Homo sapience оказался куда выше, чем у неандертальцев.

#Интеллект #Разум #Мозг #Эволюция

Читать полностью…

Малоизвестное интересное

​​У Китая и России появился шанс не дать США уйти в отрыв в области ИИ.
В этом году США пошли на крайние меры, чтобы не позволить Китаю догнать и перегнать США в важнейшей для нацбезопасности индустрии ИИ. Введенные США экспортные ограничения на высокопроизводительные процессоры сильно усложняют Китаю (не имеющему пока соизмеримых по производительности собственных процессоров) возможность конкуренции в области ИИ. Заодно под раздачу экспортных ограничений (по известным причинам) попала и Россия. И это лишает российские компании и без того тусклой перспективы, - пусть не догнать США, но хотя бы отставать на годы, а не на десятилетия.

Но тут случилось такое, что мало кто мог предвидеть.
Компания Together объявила, что смогла обучить свою модель с открытым кодом GPT-JT (6 млрд параметров):
• децентрализованно (на разнородной группе не самых крутых графических процессоров)
• соединенных медленными интернет-каналами (1 Гбит/с)


Авторы модели GPT-JT придумали кучу хитрых способов уменьшения вычислительной и коммуникационной нагрузки при децентрализованном обучении. В результате, эта модель на тестах классификации приближается к современным моделям, которые намного её крупнее (например, InstructGPT davinci v2).

Это достижение может иметь колоссальные последствия.
✔️ До сих пор магистральная линия развития ИИ определялась ограниченным набором компаний, имеющих доступ к большим централизованным компьютерам. На этих высокопроизводительных вычислительных комплексах обучались все т.н. большие модели, начиная от AlphaZero и заканчивая GPT3.
✔️ Компаниям, не имеющим в распоряжении суперкомпьютерных мощностей в этой гонке было нечего ловить (см мой пост «Есть «железо» - участвуй в гонке. Нет «железа» - кури в сторонке»).

GPT-JT сметает шашки с доски, предлагая совершенно иной сценарий будущего.
Вместо нескольких компаний – гигантов, оснащенных суперкомпьютерными системами для ИИ, распределенные коллективы разработчиков могут объединять свои скромные компьютерные мощности через не самые быстрые интернет-каналы, чтобы вместе обучать большие модели.

Но это возможно лишь при условии, что разработчики GPT-JT смогут её масштабировать со скромных 6 млрд параметров на сотни миллиардов. Ибо таково требование сегодняшних больших моделей. А в 2023 счет пойдет уже на триллионы параметров.

#ИИ #HPC #Россия #Китай #ЭкспортныйКонтроль

Читать полностью…

Малоизвестное интересное

​​Разгадка «уравнения мозга» потребовала создания новой математики.
Её зачинателем стал Эйнштейн 21 века Алберт-Ласло Барабаши.

Сетевая физическая математика – это не просто новый раздел математики, зависящей от физических свойств объектов. Это что-то типа разных таблиц умножения, в зависимости от того, на чем они написаны.

Пять лет назад Алберт-Ласло Барабаши (которого я уже много лет считаю Эйнштейном 21 века) впервые подступился к решению величайшей из загадок: как генетически кодируется устройство хадвера разума — нейронная архитектура связей индивидуального мозга.

1й же этап этой работы дал потрясающий результат. Понятийные аппараты и терминология науки о сложных сетях и нейробиологии наложились друг на друга, создав гремучую смесь с эзотерическим подтекстом (как никак, вопрос на уровне Бога — как в генетике программируется разум). В итоге забрезжила возможность найти «формулу мозга», математически строгую и позволяющую выдвигать и проверять (фальсифицировать) гипотезы о механизмах связи генетики и нейронной архитектуры.

В 2019 году Алберт-Ласло Барабаши опубликовал на пару с сыном Даниэлем (специализирующимся на вычислительной нейробиологии и коннектомике) работу «A Genetic Model of the Connectome». И в день её публикации написал такой твит — «Оставайтесь на связи — в ближайшее время последует математическая обработка результатов, позволяющая набросать уравнение мозга» (подробней см. мой пост).

Однако, с «уравнением мозга» все оказалось куда сложнее.
Существующий математический аппарат предназначен для описания идеальных сетей – эдаких нефизических сущностей, структура и динамика развития которых зависит лишь от конфигурации вершин и ребер описывающего графа.

В реальности же коннектом мозга, сосудистые сети, сеть электропроводов и сеть проводников на подложке микросхемы – это сети с разной физической основой (разной физичностью).
Эта физичность не только определяет правила непересечения ребер, но и фундаментально изменяет структуру сети и возможности ее эволюции.

Кроме того, во многих физических сетях узлы не являются точечными объектами, а физически расширены и объединены на иных сетевых уровнях, что требует разработки соответствующей многоуровневой структуры гиперсетей.

В новой работе Барабаши и его коллег «Понимание влияния физической реальности на структуру сети» для описания реальных физических сетей предложен формализм метаграфов.

В работе показано, что физичность фундаментально изменяет структуру сети. А использование метаграфов позволяет прогнозировать функциональные особенности физической сети. Например, формирование синапсов в коннектоме мозга, в соответствии с эмпирическими данными.

Теперь на очереди разработка моделирующей и аналитической платформы, которая поможет систематически исследовать конкурирующую роль генетики и физической формы сетевых соединений в мозге.

Данная работа дополняет серию прорывных работ Барабаши, формулирующих принципы «сетевой теории относительности».

Ну а дальше, оснащенный новым формализмом и аналитической платформой, Барабаши снова планирует вернуться к поиску «уравнения мозга».

#КомплексныеСети #Коннектом

Читать полностью…
Подписаться на канал