Скользящее среднее (moving average) помогает фильтровать шум в данных и видеть настоящее влияние на метрики в долгосрочной перспективе.
В идеальном мире ваши решения моментально и однозначно влияют на метрики бизнеса.
В реальном - метрики гуляют вниз и вверх сами по себе из-за сезонности, внешних событий, ошибок в рассылке и всего того, что вы не можете контролировать.
Чтобы убрать влияние внешних факторов, надо смотреть скользящее среднее за последние N периодов. Этот прием используется в финансах.
Я работаю с метриками в недельных интервалах и при построение трендов беру среднее за последние 4 недели.
Плюсы:
- избавляемся от шума в данных, видим влияние наших решений на бизнес.
- гордо добавляем в LinkedIn скилл "Data Analytics".
Минусы:
- медленная реакция на "критические" события в бизнесе: релизы с критическими багами или наоборот очень удачную фичу, которая "стрельнула". Решение - смотреть на графиках и скользящее среднее, и текущее состояние метрик.
- в массовых системах аналитики не встречается "из коробки". Решение - выгружать данные и строить самому в Excel.
#learn
martsen/15-мобильных-инсайтов-часть-2-из-5-51b342dd7931">Продолжаю делиться разбором инсайтов:
4) Доля мобильного трафика скоро превысит трафик с десктопа
5) Десктоп используют равномерно в течении дня, а смартфоны и планшеты по утрам и вечерам
6) Android - самая популярная ОС из всех
Недавно попалась статья про интересные факты и статистику о пользователях мобильных устройств. Автор этой заметки - Джефф Сауро, UX- аналитик со стажем.
Я зачитался этими инсайтами и покопал их немного глубже, чем описано в оригинальной статье.
Вот немного фактов:
1) В Южной Корее у 9 из 10 есть смартфон, в Эфиопии у каждого 20-го
2) К 2018 году будет 2.53 миллиарда пользователей смартфонов
3) У каждого второго американца есть планшет
Подробности
#learn
Когорта – это группа пользователей, которые сделали одно и тоже действие (регистрация, покупка и так далее) в течение определенного периода времени.
Когортный анализ разделяет пользователей на сегменты и отслеживает поведение каждого сегмента.
Facebook обновили инструмент аналитики и теперь это стало больше похоже на Google Analytics.
https://www.facebook.com/analytics/
(Или можете посмотреть демо по ссылке https://goo.gl/PJYxLN)
Добавили очень много всего - воронки, сегменты, тренды, возвраты. Для данных по людям появилась полная демография, и специфичные для FB показатели.
Сегодня выступал перед хорошей и теплой аудитрорией.
Тема доклада - продуктовая аналитика.
Рассказал, где вообще используется аналитика в продуктовой компании.
Постарался осветить нюансы продуктовой аналитики.
Привел пару ссылок на бесплатные инструменты и курсы.
Небольшая подборка полезных ссылочек по работе с данными:
https://www.coursera.org/learn/stats-for-data-analysis/ - один из немногих (классных!) курсов на русском языке про статистику и анализ данных
https://courses.edx.org/courses/BerkeleyX/Stat_2.1x/1T2014/info - суперкурс для начинающих по статистике от университета Беркли
http://www.evanmiller.org/ab-testing/sample-size.html - калькулятор для расчета размера выборки для А/Б-теста
https://measuringu.com/wald/ - калькулятор для расчета доверительных интервалов
http://statanaliz.info/ - мой любимый блог про обработку данных в Excel
http://gopractice.ru/ - лучший ресурс по продуктовой аналитике на русском языке
Ну и на десерт:
https://habrahabr.ru/post/217545/ - Как правильно лгать с помощью статистики :))
Сайт, где разработчики выкладывают заглушки пустых экранов.
Наример, у вы разрабатываете приложение для заказа еды и думаете, что тут показать юзеру на "холодном старте"? Заказов то еще нет.
Подсмотреть примеры можно по ссылке.
http://emptystat.es
Статья рассказывает про Design Thinking. Тема давно известная, но трактуется по-разному в разных учениях и компаниях.
Автор решил станартизовать и описать суть похода.
Самая большая проблема возникла при описании рамок Design Thinking. С одной стороны они должны быть жесткими, чтобы не было разночтений, а с другой достаточно гибкими, чтобы их можно было реально применять.
В общем хорошая статья для "раскладывания по полочкам" знаний.
https://uxdesign.cc/mindset-process-method-a-comprehensive-descriptive-model-for-design-thinking-27a501bf80cf
Каждый продуктолог (надеюсь) знает, что лучше собирать обратную связь с живых пользователей.
Определить оптимальное количество человек для качественного анализа поможет эта статья.
В ней подробно описан метод подбора количества респондентов. Автор говорит, что делать при ограниченных ресурсах.
Формула и примеры в комплекте.
https://www.smashingmagazine.com/2017/03/user-research-sample-size-data/
Емко и круто про JTBD.
Читаем и применяем на практике.
buldakova/что-такое-jobs-to-be-done-и-job-stories-4c57c1dc84cf" rel="nofollow">https://medium.com/@buldakova/что-такое-jobs-to-be-done-и-job-stories-4c57c1dc84cf
☂️ Персоны, Jobs-to-Be-Done и здравый смысл
Пейдж Лаубхаймер из группы Нильсена-Нормана опубликовал статью-сравнение двух методик: персон и Jobs-to-Be-Done.
Я предлагаю не заморачиваться насчёт следования тому или иному походу. Они каждый год разные. Персоны, юзкейсы, юзер стори, джоб стори, whatever. Реально важно одно:
Для каждой фичи или сценария понимать, кто потребитель и зачем это ему, какую проблему решает.
Выясняется серией вопросов постановщику задачи:
— Давай добавим регистрацию через соцсети.
— Зачем?
— Ну, чтобы пользователям не надо было придумывать пароль.
— А зачем пользователям вообще регистрироваться?
— Ну, чтобы купить товары в нашем магазине.
— А что мы продаём, помнишь?
— Ну да, секс-игрушки с доставкой по всей стране.
— Уверен, что покупатели захотят пускать нас в свои соцсети?
— Эээ.
— Может, наоборот, разрешим полностью анонимную покупку, без регистрации?
— Да, пожалуй.
Кто и зачем — это важно. Конкретная методика — карго-культ.
Good design is not about getting more clicks or more page views, so why would we measure success that way?
Умная мысль про измерение эффективности дизайна. Статья, где я нашёл эту мысль, напомнила мне про подход Goals-Signals-Metrics. Хотя прямой отсылки в статье на это нет.
Google Analytics обзавелся диалоговым интерфейсом.
Это означает, что можно спросить в свободной форме интерисующий вопрос и получить график.
Следущий шаг - интеграция с Google Now/Siri/Alexa.
https://analytics.googleblog.com/2017/07/ask-question-get-answer-in-google.html
Ребята из Intercom рассказали как работает отдел продуктовой аналитики в компании.
Четыре принципа:
1. Открыто обмениваться плохим и хорошим опытом
2. Быть частью продуктовой команды, а не жить отдельно от нее
3. Принять и использовать единую терминологию
4. Обучать всех внутри организации
Как проводить интервью по JTBD
https://www.slideshare.net/usefulagency/useful-meetup2-jtbd
Открыл для себя сайт, где есть подробные разборы онбординга на разных сайтах и мобильных приложениях.
Каждый онбординг представлен как набор слайдов с комментариями.
https://www.useronboard.com/onboarding-teardowns/
Последние 2 месяца я много изучаю подход “Customer Success”.
Суть в том, что нужно помогать клиентам получить максимум от вашего продукта.
Тогда они будут с вами вечно и ваши финансовые отношения будут крепки и неразрывны. А для SaaS - это очень важный показатель, т.к. будет расти LTV и уменьшаться churn.
Вроде все очевидно и так нужно делать всегда. Но на практике оказывается не так просто.
Под это дело в компаниях организуют целые департаменты и выстраивают процессы донесения пользы до клиента. Учатся доносить ценность.
Так вот делюсь полезной ссылкой, где довольно практично все описано.
Я много чего перечитал и почти везде Customer Success был описан в отрыве от реальности. А тут прям хорошо все.
http://www.forentrepreneurs.com/customer-success/
Design in Tech Report - значимая вещь в мире дизайна. Рассказывают про “самое самое”.
Посмотрел запись выступления и даю выжимку полезного для недизайнеров.
1. Автор разбивает дизайн на 3 типа:
* классический (дизайн вещей)
* дизайн-мышление
* computational design (неуверен, что можно “в лоб” это перевести как “вычислительный дизайн”. По сути - это дизайн цифровых продуктов).
В презентации 6-8 страницах можно посмотреть подробно.
2. Дизайнеры изучают технические навыки. Рынок требует более квалифицированных кадров.
3. Нету общепризнаного стандарта в инструментах для дизайнеров. Поэтому можно еще влезть со своим решением.
4. Китай идет семимильными шагами в технологическом секторе и поэтому дизайн там развивается тоже быстро.
5. В универах дизайнеров не учат самым востребованным навыкам. Но не беда, т.к. есть онлайн-образвание, которое еще и зачастую бесплатное.
6. IBM, Google, Microsoft и другие техгиганты открывают свои дизайн-гайды. Можно пользоваться и не выдумывать велосипеды.
По ссылке есть презентация на 47 страниц и аудио/видео на час.
https://designintechreport.wordpress.com/
Немного про модный подход Jobs To Be Done
http://telegra.ph/Jobs-To-Be-Done-vyzhimka-iz-stati-na-HBR-01-27