Почти половина новостных изданий запретили ИИ-компаниям сканировать свои сайты, 2023 (Ben Welsh)
По состоянию на 28 октября 2023 года, 565 из 1150 (49,1%) новостных изданий, проверенных архивом homepages.news, запретили OpenAI, Google AI или некоммерческой организации Common Crawl парсить собственные сайты
Эти три организации систематически собирают данные с сайтов, чтобы использовать их для обучения генеративных чат-ботов ChatGPT от OpenAI и Bard от Google. Однако, издатели могут настроить доступ к своим сайтам, прописав инструкции в robots.txt, тем самым исключая их из списка для такого сканирования
Бен Уэлш составил и регулярно обновляет список изданий на Palewire — там можно ознакомиться с таблицей сайтов, которые запретили доступ для каждой из трёх компаний
Больше данных из мира ИИ:
— Число изображений, сгенерированных 5 популярными нейросетями, по состоянию на август 2023
— Как менялось число параметров у больших языковых моделей, 2018–2023
— Как менялись возможности систем ИИ по распознаванию речи и изображений относительно способностей человека, 1998–2020
— Вычислительные ресурсы, затраченные на обучение систем искусственного интеллекта, 1950–2022
— Как менялись объёмы мировых инвестиций в индустрию ИИ и стоимость тренировки ИИ, 2013–2021
Доли разных версий Windows, Android и iOS в мире, 2009–2023 (StatCounter)
Данные по Android и iOS учитывают смартфоны и планшеты
Другие наши публикации про рынок операционных систем:
— Доли мобильных операционных систем, 2009–2022
— Доля iOS и Android и количество сотовых телефонов в сравнении с населением стран мира, 2018
— Общее число мобильных приложений на iOS, Android и мультиплатформенных
— Визуализация различных версий Windows
Уровень среднего и медианного богатства на душу населения в 40 странах мира, 2023 (Visual Capitalist)
Уровень богатства выражен в номинальной стоимости американского доллара. Синими полукругами обозначен средний показатель, голубыми — медианный
Примечательно, что разница между этими показателями может косвенно указывать на уровень неравенства в стране. Простая математика: чем больше разница, тем больше в стране ультрабогатых, которые поднимают среднее значение, но практически не влияют на медианный показатель
Источник данных — 2023 UBS Global Wealth Report
Больше данных по уровню жизни в странах мира:
— 12 социально-экономических показателей в странах мира, 2021–2022
— Сравнение 12 социальных, экономических и политических метрик в странах мира, 2018–2022
— Социальные, экономические и экологические показатели стран мира за разные годы
— Индекс человеческого развития на четырёх континентах, 2021
Как выросли цены в 8 категориях товаров и услуг в США, 1999–2022 (Shri Khalpada)
На диаграммах указан индекс потребительских цен. Это относительный показатель, который используется для оценки роста цен в базовых категориях товаров и услуг за отдельный период времени. В этой визуализации за точку отсчёта взяли 1 $ в эквиваленте цен на разные товары и услуги
Категории сверху вниз:
— еда
— жильё
— одежда
— транспорт
— расходы на лечение
— отдых
— образование
— другое
На второй картинке — графики отдельно по категориям за последние 5 лет
По ссылке в заголовке — интерактивная версия, гже можно посмотреть данные по отдельным годам
Источник данных — U.S. Bureau of Labor Statistics
Ещё мы писали про инфляцию и цены в странах мира:
— Какие продукты в России сильнее всего подвержены шринкфляции, 2023
— Инфляция в странах мира, 2000–2022
— Индекс потребительских цен в 9 странах мира, 1960–2021
— Динамика инфляции индекса потребительских цен в США, 1789–2022
Как менялась степень доверия к СМИ в США, 1972–2023 (Gallup)
Рецензентам задавали вопрос: «В целом, насколько вы доверяете средствам массовой информации — газетам, телевидению и радио — в полном, точном и честном освещении новостей?»
Вариантами ответа были:
— достаточно сильно (зелёный)
— не очень (жёлтый)
— нисколько (оранжевый)
Ещё мы писали про медиа и общественное мнение:
— Какая доля американцев узнаёт новости в Тиктоке и других соцсетях, 2020–2022
— Какими социальными сетями чаще пользуются разные поколения, США, 2021
— Уровень одобрения президента в США, 1958–2022
— Рейтинг доверия Путину, 1999–2019, опросы ВЦИОМа, Левады и ФОМа
Динамика распределения доходов в мире, 1976–2023 (Realtime Inequality)
На самом сайте можно настроить отображение по виду доходов, группам и перцентилю населения. Выше на диаграммах данные о доходах нижних 50%, средних 40% и верхних 10%, 1%, 0,1% и 0,01% населения мира:
— рост месяц к месяцу
— средние показатели
— общие объёмы
— долевое распределение
Методология
Другие наши публикации про доходы и достаток людей в мире:
— Новые показатели черты крайней бедности, 2022
— Пирамида глобального распределения богатства, 2020
— Распределение населения Земли по доходам, 2017
— Уровень счастья и богатства в странах мира, 2022
— Какой долей национального богатства владеют нижние 80% населения, 2021
Число ядерных боеголовок по странам мира, 1945–2022 (Reddit)
Источник данных — Our World in Data
Ещё мы публиковали:
— Инфографика про историю ядерного оружия
— Динамика числа ядерных боеголовок в арсенале США и СССР/РФ с 1950 по 2017 год
— Размеры ядерных грибов при 10 крупнейших ядерных взрывах в истории
Число смертей в ДТП в Осло, 1975–2019 (Aften Posten)
В 1975 году в столице Норвегии проживало около 360 тысяч человек, а в 2019 — чуть больше 680 тысяч. В 2019 в результате ДТП погиб 1 водитель и ни одного пешехода или велосипедиста
Больше данных по смертности в ДТП:
— Смертность на 100 000 человек на дорогах стран Азии, 2019
— Смерти детей-пешеходов в США по дням, 2006–2020
— Доля ДТП со смертельным исходом и объём алкоголя в крови водителей, 2011
— Смерти в ДТП в новогоднюю ночь по часам, 2011–2020
Выручки в музыкальной индустрии с разбивкой по носителям и агрегаторам, 1973–2022 (Visual Capitalist)
Среди них:
— магнитофонные кассеты Stereo 8
— виниловые пластинки
— компакт-кассеты
— компакт-диски
— загрузки (MP3)
— рингтоны
— лицензированная цифровая музыка
— стриминговые сервисы с разбивкой на выручку от рекламы и от подписок
Пик выручек пришёлся на 1999 — год основания файлообменника Napster, который ознаменовал закат эпохи CD и начало эры интернет-музыки
Источник данных — Recording Industry Association of America
Ещё мы писали про музыку:
— Эволюция параметров музыки, 1920–2010
— Как менялось соотношение громкости вокала и аккомпанемента в песнях, 1940–2020
— Динамика средней продолжительности и темпа песен хит-парада Billboard, 1958–2019
— Сколько стоит музыка
— Сколько прослушиваний необходимо на различных музыкальных стримингах, чтобы заработать 1000$, 2022
— Число прослушиваний на Spotify, необходимое для покупки некоторых базовых продуктов в Великобритании, 2023
5 крупнейших стран по добыче нефти в мире, 1985–2021 (Reddit)
Источник данных — Energy Institute
Больше данных по добыче полезных ископаемых:
— Крупнейшие производители нефти в мире, 2021
— Крупнейшие производители природного газа в мире, 2021
— Объёмы добычи золота по странам мира, 1820–2022
— Крупнейшие страны по добыче алмазов в мире, 2022
— Сколько металла и металлической руды было добыто в 2021 году
10 крупнейших стран и регионов по экспорту автомобилей в 2000 и 2022 (Visual Capitalist)
По центру указаны доли рынка в %, справа — объёмы экспорта в долларовом эквиваленте
Примечательно, что Евросоюзу и 9 странам из этого списка принадлежало 95,4% мирового экспорта автомобилей в 2022 году
Источник данных — World Trade Organization
Ещё мы писали про авторынок:
— Динамика объёмов и структура экспорта автомобилей из Китая, 2018–2023
— Динамика мировых продаж пассажирских автомобилей, млн штук, 2010–2020
— Объём проданных электромобилей в странах мира, 2011–2021
— Доходы и средняя стоимость автомобилей разных марок группы Volkswagen, 2021
Интересно, что происходит с digital-дизайнерами в России?
DSGNERS! запускает исследование, по итогам которого вы сможете оценить, в каком состоянии находится рынок дизайна в России: зарплаты, сферы, грейды, портфолио, платформы. Это только часть того, что затронет исследование. Опрос займет всего 10-15 минут, но даст множество данных, которые потом круто оформят и покажут в итоговом исследовании.
Например, после итогов исследования у вас точно отпадут эти вопросы:
На какую зарплату можно претендовать на разных позициях
Средняя численность штата дизайнеров
Где прокачаться дизайну
Помогают ли нейросети в работе
Где создавать портфолио
→ Подробнее об исследовании
→ Сразу пройти опрос
Всех пользователей дизайнерс ждет сюрприз. Дадут специальную ачивку прямо в личном профиле.
Результаты (отдельный сайт со всей информацией) будут опубликованы ближе к новому году. А тех, кто поможет распространить опрос у себя в соцсетях — обязательно там отметят.
Давайте развивать дизайн индустрию вместе ❤️
#партнёрский
Какую долю всех выпускаемых фильмов составляли разные жанры в кино, 1910–2021 (Bo McCready)
Обратите внимание, что вертикальные шкалы диаграмм отличаются между собой и демонстрируют динамику популярности конкретного жанра, а не соотношение с другими. Например, комедии на своём пике составляли почти 40% всех релизов, тогда как научная фантастика едва превышала 3% всех выпущенных в год фильмов, но на картинке графики имеют одинаковую высоту
Ещё мы писали про киноиндустрию:
— Динамика количества выпущенных в прокат фильмов, 1909–2022
— Длительность фильмов с 1885 по 2005 год
— Динамика хронометража фильмов, 1995–2021
— Жанровое распределение фильмов, 1913–2021
— Самые успешные голливудские фильмы, 1970–2023
Спиральные графики показателей биткоина, 2009–2022 (Clockwork Partners)
Среди множества визуализаций можно найти как параметры сети биткоина, так и его цену, выраженную в долларах, биржевых индексах, металлах, акциях некоторых компаний и в других криптовалютах
Другие наши публикации про биткоин и криптовалюты:
— Пять графиков перед четвёртым халвингом биткоина
— Стоимость майнинга биткоина в странах мира, 23 марта 2022
— Выбросы CO₂ биткоина и других индустрий, 2021
— Мировое венчурное финансирование криптоиндустрии и курс биткоина, 2020–2023
Распределение заработных плат среди программистов, использующих клавиши Tab и пробел, 2017 (Reddit)
Голубым цветом обозначено распределение среди тех, кто использует и Tab, и пробел, синим — среди тех, кто использует только пробел. На картинках 2-4 указано распределение среди разработчиков с опытом в 3, 5 и 7 лет соответственно
#рацкек
Распределение оценок на IMDB по жанрам (Reddit)
В анализ было включено 25 749 фильмов с 8000 и более оценок на IMDB. Сверху указаны фильмы с самым высоким рейтингом в каждом из жанров
Другие наши публикации про киноиндустрию:
— Динамика количества выпущенных в прокат фильмов, 1909–2022
— Длительность фильмов с 1885 по 2005 год
— Динамика хронометража фильмов, 1995–2021
— Жанровое распределение фильмов, 1913–2021
— Самые успешные голливудские фильмы, 1970–2023
— Какую долю всех выпускаемых фильмов составляли разные жанры в кино, 1910–2021
Тренд на AR приложения набирает обороты — загружаешь 1 программу, а способов применения находишь 10
Взять приложение AR Code Object Capture 3D Scan, которое может захватить любой объект и превратить его в 3D-модель.
🔵Можно отсканировать объект, перенести в 3D и использовать в пространстве, как вам захочется: примерять мебель и декор, измерять размеры предметов и сравнивать их.
🔵В этом же приложении можно создать AR меню в ресторане — так клиент до покупки поймёт размер блюд, сравнит несколько позиций и детально рассмотрит их состав.
🔵Те, кто любит рисовать с натуры, могут заранее захватить 3D-модель предмета, а в удобное ему время сделать с неё рисунок.
Ещё больше про тренды иммерсивных технологий, приложения и механики рассказывают ребята на канале Такая реальность — /channel/+b7yxUIu5bNtkNTBi
Они сами решают задачи клиентов с помощью VR и AR, поэтому собирают самые интересные и свежие кейсы.
Реклама, Толочков Петр Александрович, ИНН 770205809100, erid: Kra242WHE
Как менялась средняя стоимость билета на концерт в североамериканских турах, 2009–2023 (Chartr)
Данные основаны на ценах на билеты среди топ-100 музыкальных туров в Северной Америке. Синий график — номинальная цена, зелёный — с поправкой на инфляцию, то есть с учётом индекса потребительских цен
Источнк данных — The Wall Street Journal
Другие наши публикации про инфляцию в странах и в мире:
— Какие продукты в России сильнее всего подвержены шринкфляции, 2023
— Инфляция в странах мира, 2000–2022
— Индекс потребительских цен в 9 странах мира, 1960–2021
— Динамика инфляции индекса потребительских цен в США, 1789–2022
Как вывести свои навыки Дата Саентиста на максимум?
Бесполезно импортировать устаревшие библиотеки, бездумно генерировать фичи и читать бредовые статьи по ускорению Pandas в 100 раз.
Подумайте сами — возможности аналитика данных безграничны! Вы можете: обрабатывать гигантские датасеты на любых мощностях, использовать LLM модель, вроде Codex для генерации готовых моделей, получить МЛ сертификат от Google — совершенно бесплатно!
Об этом можно узнать здесь. Вообще, канал «Анализ Данных» — единственное место в телеграме, где вы пройдете путь от «гугл, как открыть csv в Python?» до аналитика данных.
Ещё они собрали маст-хэв-папку для всех дата-саентистов: /channel/addlist/1EVUTIElETU4Zjg6
Подписывайтесь, такие знания в 2023-м году на вес золота: @data_analysis_ml
Концентрация CO₂ в атмосфере Земли за последние 800 тысяч лет (Reddit)
Источники данных: Global Monitoring Laboratory, National Centers for Environmental Information
Другие наши публикации на эту тему:
— Доля выбросов CO₂, вызванных потреблением, и население в Китае и G7
— Динамика выбросов CO₂ в 8 странах мира, 1750–2020
— Выбросы CO₂ и объёмы потребления электроэнергии в странах мира, 1965–2021
— Какое расстояние можно преодолеть на различном транспорте, выбросив 1 кг CO₂
Сколько спят разные животные (Visual Capitalist)
В фиолетовом кружочке указана средняя продолжительность жизни, коричневая обводка — процент суток, который животное спит, синие сегменты и число около полумесяца — среднее количество часов сна в сутки. Зимняя спячка и другие виды необычного поведения в данных не учтены
Источник данных — Sleep Foundation
Ещё публикации на эту тему:
— Связь между временем отхода ко сну и сердечно-сосудистыми заболеваниями
— Как меняется режим сна и бодрствования с возрастом
Ежегодные выручка и расходы Фонда Викимедиа, 2006–2022 (Chartr)
Фонд Викимедиа — организация, которая поддерживает инфраструктуру для работы таких вики-проектов, как: Википедия, Викисловарь, Викицитатник, МедиаВики и другие
Выручка обозначена синим графиком, расходы — красным. Справа указана посещаемость англоязычной Википедии (голубой) и всех остальных вики-проектов (чёрный) в млрд просмотров. 23 млрд просмотров в декабре 2022 — это сумма просмотров всех ресурсов Викимедии
Источник данных — Wikimedia Statistics
Ещё про Википедию:
— Посещаемость самых популярных статей на Википедии, 2022
— Топ-100 редакторов Википедии по числу правок
— Всего 1% самых активных авторов Википедии написал около 77% статей в ней
История развития игры камень, ножницы, бумага
4,5 млрд лет единственным исходом в игре была ничья. Ситуация изменилась примерно 3,5 тысячи лет назад — после изобретения ножниц началась эпоха доминирования камня. Шансы игроков уравнялись только после изобретения бумаги
#рацкек
Мировая карта подводных коммуникационных кабелей, 2022 (Visual Capitalist)
Цветом указана длина кабелей. Примечательно, что все подводные кабели с картинки обеспечивают 95% международной передачи данных
Источник данных — TeleGeography
Больше интересных карт:
— Карта подводных коммуникационных кабелей в мире, 2021
— Карты городов, дорог, ЖД путей, морских портов и аэропортов мира
— Мировая карта освоения природы людьми за последние 12 000 лет
Мировая карта разнообразия климата на суше (Reddit)
Каждый квадрат на карте — территория размерами 100 × 100 км. Цветом обозначено число климатических зон согласно классификации климатов Кёппена в каждой области
Больше данных по климату на планете:
— Насколько разнообразен климат в странах мира
— Погода в странах мира
— Карта среднесуточных температур в мире, 2022
— Распределение глобальной температуры, 1920–2021
— Мировая карта облачного покрова, 2020
— Площадь снежного покрова Северного полушария Земли
Самые частые географические названия в странах Европы, 2023 (Landgeist)
Источник данных — OpenStreetMap.org. Методология описана в статье автора по ссылке в заголовке
Другие наши публикации про имена и названия:
— Как крупные ураганы влияют на имена младенцев в США
— Карты с культурными различиями в странах Европы и мира
— Соотношение названий и числа улиц в России
— В честь кого в России называют улицы
Спиральные графики показателей биткоина, 2009–2022 (Clockwork Partners)
Если присмотреться к на первый взгляд сложным графикам и понять их, они дают новый слой информации
Среди множества визуализаций можно найти параметры сети биткоина, его долю в портфолио инвесторов и цену, выраженную в разных эквивалентах. На последних двух картинках — цена биткоина в:
— долларах
— биржевых индексах
— металлах
— акциях компаний
— в других криптовалютах
Рекомендуем внимательно изучить все визуализации по ссылке в заголовке (переход по разделам спрятан за кнопочкой справа вверху)
Другие наши публикации про биткоин и криптовалюты:
— Пять графиков перед четвёртым халвингом биткоина
— Стоимость майнинга биткоина в странах мира, 23 марта 2022
— Выбросы CO₂ биткоина и других индустрий, 2021
— Мировое венчурное финансирование криптоиндустрии и курс биткоина, 2020–2023
Смерти детей-пешеходов в США по дням, 2006–2020 (Reddit)
Учитывались дети до 18 лет. Каждая шкала — суммарное за 14 лет количество убитых в этот день детей
Источник данных — NHTSA
Ещё публикации на эту тему:
— В каком месяце рождается больше всего детей в странах мира
— Динамика детской смертности по странам мира, 1990–2017
Когда и где случались последние стихийные бедствия (Days Since Incident)
Счётчики показывают, сколько дней прошло с момента последних катастроф, а также их категорию и масштабы. Среди бедствий: ураганы, землетрясения, цунами, извержения вулканов, падения метеоритов и т. д.
Больше про природные бедствия:
— Все землетрясения с магнитудой более 4, 2002–2022
— Карта всех зафиксированных извержений вулканов в мире, 1900–2022
— Зарегистрированные падения метеоритов, 1850–2013
— Пути ураганов около Северной Америки за последние 100 лет
— Пятничное: рейтинг всех апокалиптических угроз
Насколько разнообразен климат в странах мира (Pornstat)
Цветом на карте обозначено число видов климата согласно классификации климатов Кёппена. На диаграмме — число климатов (по вертикали) и площадь стран и территорий (по горизонтали)
Лидер — США. Там представлено 25 типов климата из 30. Далее идут Индия (21) и Китай (20), а в России, несмотря на крупнейшую площадь на планете, встречается только 17 типов климата
Другие наши публикации про климат на планете:
— Погода в странах мира
— Карта среднесуточных температур в мире, 2022
— Распределение глобальной температуры, 1920–2021
— Мировая карта облачного покрова, 2020
— Площадь снежного покрова Северного полушария Земли