Борзило
5.8K subscribers
525 photos
26 videos
5 files
242 links
⇨ Про аналитику, продукты, маркетинг
⇨ Автор курса по АБ тестам
⇨ Смело пиши - @borzilo_y


ИНН 026702638983
Download Telegram
5 ошибок в А/Б-тестах, которые убивают валидность результатов.
Ну и как их избежать (¬‿¬ )

Встречай коллаб от Вовы Сыропятова, антифрод-аналитика Garage Eight, и Юрия Борзило, автора канала «Борзило». Вместе они собрали типичные ошибки, которые искажают результаты даже самого перспективного теста. 

Все оформили в карточки с комментариями и советами экспертов, чтобы было удобно сохранить и пользоваться!

#GarageEight_аналитикам
21👍5❤‍🔥4🔥2👎1🤣1
Мерч с Матемаркетинга

Рубрика, про то какой мерч удалось собрать на Матемаркетинге.
Вот мерч с прошлого Матемаркетинг 2024

Ребята из Trisigma подогнали кепку, обещал провести в ней занятие у себя на курсе. Сегодня как раз занятие на 4 потоке. Надо выполнить обещание.

Также обратите внимание на футболку ABuser. На прошлой конференции познакомился с ребятами, которые решили заняться аналитическим мерчом, а на этой конфе они выкатили свою первую футболку. Пока по позициям мерча у них не густо, то что есть можно посмотреть в их группе

Островок подогнал незаменимую вещь для тех кто любит есть за компом - пылесос для клавиатуры. Я обычно ем на кухне, но в хозяйстве пригодится.

Делитесь в комментах фотками своего мерча
13👍2🔥2
Олды здесь? Придумайте смешной комментарий.

P.S. Бывший руководитель скинул
😁69
Интересное из мира науки: эмбриогенез, клеточный интеллект, ксеноботы

Недавно посмотрел интервью одного интересного ученого. Его зовут Майкл Левин. Является директором Центра регенеративной и биологии развития Тафтса и содиректор Института компьютерно сконструированных организмов. Вроде как человек не просто "сумасшедший", а действительно ученый))

Сейчас он в основном занимается вопросами, эмбриогенеза(как развивается эмбрион от момента клетки до становления полноценным живым организмом) и клеточным интеллектом.

Ниже некоторые идеи, которые мне показались очень интересными.


1. Головастики Пикассо

Майкл задается вопросами. Откуда клетка знает как ей вырасти в полноценный организм, как клетки могут объединяться чтобы отдельно сделать сердце, а отдельно печень.

Головастику, когда он становится лягушкой, приходится менять форму морды. Глаза, ноздри, челюсти — все эти элементы должны двигаться. Раньше считалось, что в организме есть своего рода жестко запрограммированный набор последовательностей. Согласно с ними все эти элементы двигаются, и в итоге головастик становится лягушкой. Но несколько лет назад они обнаружили довольно удивительное противоречие.

В научной среде есть такое явление как «головастик Пикассо» — это головастики, у которых могут быть смещены в сторону, челюсти глаза, ноздри… То есть, изначально все элементы находятся «не на своих местах». В итоге, эти головастики вырастают и приобретают обычные лягушачьи морды. Органы могут изначально находиться в неправильном положении, но в итоге они все равно складываются в нормальном порядке.

2. Эксперимент с плоскими червями
Майкл провел эксперимент с червями Планариями. Эти черви умею хорошо регенирировать. Если их разделить на 200 частей, то из каждой части вырастет новый червь. У этих червей есть мозг и прочие органы. Майкл утверждает, что когда клетки организма начинают формировать определенные электрические сети. По сути, через эти сети они могут общаться и идти к какой-то общей цели, например сформировать определенный орган. Он утверждает, что если подключиться к этой электрической сети и изменить ее, то можно перепрограммировать поведение группы клеток, при это никак не меняя геном.

В эксперименте с червями они пытались повлиять на электрическую цепь таким образом, чтобы у червя выросло 2 головы, а не одна. Он утверждает, что им это удалось. Обычно такое объясняется генными мутациями, но геном никак не менялся, он остался прежним, т.е. через управление электричеством клеток они буквально научили группу клеток вести себя по новому.

3. Перспективы регенеративной медицины и медицины в целом
Представьте, что человечество научится общаться с группой клеток по средством электричества. По сути организм каждого из нас вырастил руки, ноги, т.е. он знает как это делать, но если у кого-то оторвется рука то снова она не вырастет. А что если бы мы могли дать клеткам сигнал о том, что они должны это сделать ведь они уже это делали в процессе эмбриогенеза и знают как это сделать.

Майкл утверждает, что им далось достичь успеха в этом направлении. Они провели эксперимент со взрослыми лягушками. Взрослые лягушки не могут регенерировать конечности, но Майкл говорит, что им удалось через управление электричеством клеток запустить процесс роста новой лапы. Т.е. клетки объеднились для выполнения этой задачи.

4. Клеточный интеллект
Майкл призывает пересмотреть взгляд на интеллект. Для большинства обывателей, интеллект это что-то связанное с мозгом и способностью мыслить. Но Майкл придерживается другого взгляда, он предлагает относится к интеллекту как к способности достигать цель разными путями. Выше был описан эксперимент с головастиками пикассо. В этом эксперименте Майкл вырастил глаз у головастика в желудке, но когда организм перестраивался во взрослую лягушку, то глаз всеравно пришел на место где и должен быть глаз лягушки. Он говорит, что это показывает, что нет жесткой программы, а есть нечто похожее на интеллект, что может изменять свой путь для достижения цели.
🤔11👍21
Таким образом Майкл говорит об ограниченности нашего взгляда на интеллект. Предполагая, что отдельные органы и скопления клеток обладают интеллектом. Каждый отдельный уровень клетка → ткань → орган - это отдельные интеллекты. Так например каждая клетка по отдельности не знает как образовать тот или иной орган, но когда между клетками идет электрический обмен, то они понимают чем занимаются соседи и какая именно цель у каждой группы клеток.

Я вообще не специалист в этом. Могу где-то что напутать. Поэтому вот вам его большое интервью.

https://youtu.be/ti6LeKOd5rk?si=zKwFivoh4-aNlHsY
👍8🤔6🔥21
🔥23😁6😢6🤣3👎2
Сегодня выступаю на конфе, с темой "Дизайн Аб теста, как основа честного эксперимента".

Конференция рассчитана на широкий круг слушателей: маркетологи, продакты, аналитики и т.д., поэтому тему освещаю в лайт формате, чтобы даже неподготовленные слушатели могли что-то понять))

Выступаю в 17:10 мск

Ссылка на посадочную страницу
👍11❤‍🔥5🔥5🤣1
Чтиво для тех кто хочет упороться в АБ тесты на новогодних праздниках.

Моя коллекция книжек по этой теме. Кидайте свои рекомендосьены по книгам
🔥67🫡32
Внедрить VS вырастить экспериментальную культуру в компании

Хочу немного порассуждать про экспериментальную культуру и про то как развить ее внутри компании. Компания - это система. Система - это некоторая сбалансированная структура, компоненты которой связаны и влияют друг на друга.

Любая система так или иначе стремится к гомеостазу. Если её разбалансировать в одном месте, то она постарается компенсироваться в другом.

Когда мы говорим "внедрить экспериментальную культуру", то мы как бы хотим извне повлиять на какой-то компонент системы, например говорим, что теперь работу менеджеров будут оценивать строго по росту метрик и числу проведенных АБ тестов.

Скорее всего система подстроится под это воздействие, но будет компенсация в виде того, что люди найдут как выбирать правильные метрики, которые будут расти в экспериментах, но это будет рост метрик, а не рост бизнеса и продукта.

Кроме этого kpi по числу экспериментов будет вынуждать запускать бестолковые эксперименты, чтобы просто выполнить этот kpi. Получается какая-то ИБД, а не экспериментальная культура.

Что же такое "экспериментальная культура"? Взглянем на слово культура в широком смысле. Это некоторые паттерны, идеи, устои, ценности группы людей, которые родились в процесс эволюции и развитии этой группы.

Если мы перейдем на уровень компании, то это тоже некоторая группа людей, компания эволюционирует и развивается, там есть различные обычаи и ритуалы.

На мой взгляд более эффективно в долгосрочной перспективе подходить к вопросу экспериментальной культуры с точки зрения выращивания, а не внедрения. Внедрение - это то что мы из вне вводим в систему, а выращивание - это то что появляется из системы.

Поговорим про выращивание экспериментальной культуры. Внедрение - это как бросать семена в песок и ждать, что они прорастут. Выращивание - это как бросать семена в плодородную почву.

Плодородная почва - это те моменты в продуктовой работе где у команд появляется проблема, которую можно было бы решить с помощью эксперимента.

Например, выкатили изменение без АБ, а оно ухудшило метрики и все получили по голове или в команде спорят какое решение будет эффективнее и не могут выбрать или смотрят на метрики до и после релиза, но не понимают стало лучше или хуже. Т.е. это те моменты когда эксперименты могли бы действительно решить проблему.

Вот в такие моменты люди открыты, к тому чтобы в них начала проростать новая культура экспериментирования. Человек в системе не будет это воспринимать как что-то навязанное, а логично возникающее и встраиваемое в систему решение проблемы.

Пройдя несколько таких циклов решения своих проблем эксперименты встроятся в культуру отдельного человека и он уже будет носителем этого культурного кода и будет дальше распростронять его на систему.

Роль человека отвечающего за эксперименты в компании в первую очередь находить такие моменты "с плодородной почвой" и вовремя кидать туда "семена" - показывать как эксперименты помогут решить проблему. Это более долгий процесс, чем директивное внедрение сверху, но именно этот путь позволяет вырастить культуру, а не ее имитацию.

А как вы считаете можно ли внедрить экспериментальную культуру или все таки вырастить?
👍164🔥3🤔1
Мне кажется я понял красоту математики

В школе я не любил математику, она мне казалась абстракцией лишенной смысла.

Я не из тех кому по приколу просто решать уравнения и кайфовать от того что вывел какую-то формулу и все сошлось.

У меня нет какого-то специального математического образования, но последние месяцы решил немного покопаться в математике.

Появилось ощущение, что я начал видеть некоторую красоту и философскую глубину в математике.

1. Вот например площадь круга pr квадрат. Даже во времена краманьенцев было так, только они еще не знали.

2. Зная 2 стороны треугольника и угол между ними мы можем вычислить длину 3 стороны.

3. Производная просто существует, знаешь ты о ней или нет.

Короче это прикольно, что есть какие-то вещи, которые существуют сами по себе и проявляются во многих реальных вещах и процессах, а мы их просто как бы открываем, но не изобретаем.

Раньше я смотрел на математику как на некую абстракцию, а сейчас как на некоторые законы, которые люди просто открывают для себя. Это как-то немного меняет точку сборки😀
👍2015🌚1
Что происходило в блоге за этот год?

1. Написано 222 поста
2. Провел 2 потока марафона АБ тестов и 4 потока курса по АБ тестированию (более 100 учащихся)
3. Проведено 5 стримов с гостями: Илья, Антон, Лена, Матвей, Вит
4. Сам поучаствовал в 2 стримах: с Владом, с Антоном и 2 онлайн конференциях (зовите меня на стримы если проводите)
5. Сгонял на Аху и Матемаркетинг
6. Самый залайканый мем года (и он не про АБ тесты)
7. Событие года и самый залайканный пост (173 реакции)
8. Самый сохраняемый пост (1144 раза)

Спасибо, что читаете 🚀
🔥282
Помните, в конце сентября у меня был стрим с Виталием Черемисиновым. Он сейчас входит в команду платформы АБ тестирования Trisigma от Авито.

🔜 Он недавно завел канал где делится интересным, в том числе про АБ тестирование.

Кстати, если хотите можем взглянуть на платформу Trisigma. Провести стрим, с Витом, c демонстрацией платформы Trisigma?
🔥32