​Инструментарий Data Scientist'а: Airflow + MLFlow.

См. подробную документацию и статьи в предыдущих статьях.
🌐 https://youtu.be/NfPf0Y770DA
🌐 Репозиторий с кодом из видео » https://github.com/miracl1e6/auto-pipeline-airflow-mlflow

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming #mlflow #airflow

🔗 miracl1e6/auto-pipeline-airflow-mlflow
Contribute to miracl1e6/auto-pipeline-airflow-mlflow development by creating an account on GitHub.


🎥 Airflow и MLFlow автоматизаций пайплайнов Machine Learning / MLOps
👁 1 раз ⏳ 3164 сек.
Разверните облачный сервер для Data Science в Selectel: https://slc.tl/JSss5, получите 1000 бонусных рублей по промокоду miracl6

Курс Data Science для начинающих PyMagic
Подробная информация о курсе, программа обучения по ссылке - https://pymagic.ru

Репозиторий с кодом из видео:
https://github.com/miracl1e6/auto-pipeline-airflow-mlflow

Доументация Airflow https://airflow.apache.org
Инфа на русском https://ru.bmstu.wiki/Apache_Airflow

Доументация MLFlow https://www.mlflow.org/docs/latest/index.html

Instagram https://www.instagram.com/miracl6_
Facebook https://www.facebook.com/miracl1e6
Telegram channel https://tttttt.me/miracle_of_science

#ityoutubersru #datascience #mlops #mlflow #airflow

➰ Источник ВК

​DeepMind научила нейросетевых агентов командной игре в футбол.
Сначала агенты учились базовым движениям, имитируя движения людей, затем тренировались, отрабатывая более сложные движения, к примеру, дриблинг, а после этого играли в команде и учились взаимодействовать с партнером, повышая тем самым шансы команды на гол.

🌐https://nplus1.ru/news/2021/06/01/deepmind-football
🌐Статья с описанием разработки » https://arxiv.org/pdf/2105.12196.pdf
🌐Видео » https://youtu.be/KHMwq9pv7mg

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming #deepmind

🔗 DeepMind научила нейросетевых агентов командной игре в футбол
Они научились сложным взаимодействиям с партнерами по команде


🎥 From Motor Control to Team Play in Simulated Humanoid Football
👁 1 раз ⏳ 463 сек.
Skip to 4:09 for highlights of gameplay.
Paper: https://arxiv.org/abs/2105.12196

0:00 Intro
0:20 Overview
1:00 Environment and Rules
1:51 Training
3:05 Imitation
3:20 Drills
4:09 Highlights
7:39 Outro

➰ Источник ВК

​Сравнение OpenCL с CUDA, GLSL и OpenMP.
В этом топике приведено сравнение OpenCL с CUDA и шейдерами для GPU, а также с OpenMP для CPU.
Тестирование проводилось на задаче N-тел. Она хорошо ложится на параллельную архитектуру, сложность задачи растёт как O(N2), где N — число тел.

🌐Что такое OpenCL? » https://habr.com/ru/post/72247/
🌐https://habr.com/ru/post/96122/

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programmin

🔗 Сравнение OpenCL с CUDA, GLSL и OpenMP
На хабре уже рассказали о том, что такое OpenCL и для чего он нужен, но этот стандарт сравнительно новый, поэтому интересно как соотносится производительность программ на нём с другими решениями....

➰ Источник ВК

​Метрики качества моделей классификации. Эта статья про взаимосвязь между метриками Precision-Recall и ROC-кривой.

🌐http://pages.cs.wisc.edu/~jdavis/davisgoadrichcamera2.pdf

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming #roc #precision #recall

🔗 The Relationship Between Precision-Recall and ROC Curves

➰ Источник ВК

Подписывайтесь на наш Telegram-канал: https://vk.com/neurolearn

#telegram #machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming

➰ Источник ВК

​Какие метрики используются в задачах машинного обучения?
👉🏻Метрики в задачах классификации
👉🏻Accuracy, precision, recall и F-мера
👉🏻AUC-ROC и AUC-PR
👉🏻Logistic Loss - логистическая функция потерь

🌐https://habr.com/ru/company/ods/blog/328372/
🌐Некоторые задачки по AUC-ROC » https://dyakonov.org/2015/10/09/%D0%B7%D0%B0%D0%B4%D0%B0%D1%87%D0%BA%D0%B8-%D0%BF%D1%80%D0%BE-auc-roc/

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming

🔗 Метрики в задачах машинного обучения
Привет, Хабр!

В задачах машинного обучения для оценки качества моделей и сравнения различных алгоритмов используются метрики, а их выбор и анализ — непременная часть работы датасатаниста.
В...

➰ Источник ВК

​Участвуй в офлайн-хакатоне CRM Hack от лидера российского ИТ- рынка компании Т1 Консалтинг (входит ГК Т1, ранее ГК Техносерв) и предложи Killer Feature для CRM 21 века. На хакатоне ждут решения из области AI:

📌 Помощники сотрудникам
📌 Взаимодействие с клиентом
📌 Замена ручного труда

Прием заявок до 5 августа, а если хочешь задать вопросы о задачах и пообщаться с экспертами Т1, то подключайся к на онлайн-митапу 26 июля на сайте хакатона: https://clck.ru/VrMpm

🔗 CRM Hack, Москва, 21-22 августа
Офлайн-хакатон по разработке фич для CRM от Т1 Консалтинг

➰ Источник ВК

​Нейросеть обучили изменять ракурс любых видео.
В основе нового алгоритма — нейросеть NeRF (Neural Radiance Fields for Unconstrained). Эта появившаяся в прошлом году сеть умеет превращать фотографии в объемную анимацию. Однако для достижения эффекта перемещения в видео проект пришлось существенно доработать.

🌐https://habr.com/ru/company/selectel/blog/555446/
🌐https://thumbs.gfycat.com/MiserableRawAlpineroadguidetigerbeetle-mobile.mp4

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming

🔗 Прямо как в «Матрице»: нейросеть обучили изменять ракурс любых видео
В фильмах или роликах с YouTube мы наблюдаем происходящее из одной точки, нам не доступны перемещение по сцене или смещение угла зрения. Но, кажется, ситуация меняется. Так, исследователи из...


🎥 Bullettime GIF | Gfycat
👁 1 раз ⏳ 8 сек.
Watch and share Bullettime GIFs and Matrix GIFs on Gfycat

➰ Источник ВК

​Разбираемся с внутренностями алгоритмов обучения. Наивный Байесовский классификатор в 25 строк кода.

🌐https://m.habr.com/ru/post/120194/

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming

🔗 Наивный Байесовский классификатор в 25 строк кода
Наивный Байесовский классификатор один из самых простых из алгоритмов классификации. Тем не менее, очень часто он работает не хуже, а то и лучше более сложных алгоритмов. Здесь я хочу поделиться...

➰ Источник ВК

​Machine Learning Podcast
Подкасты по машинному обучению »
🌐https://www.youtube.com/channel/UCzvfXLNpB2Bbf32dc7a8oDQ
🌐https://anchor.fm/kmsrus/episodes/027-ML----ODS-------e1444kc

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python#буднипрограммиста #programming

🔗 Machine Learning Podcast - YouTube

➰ Источник ВК

​Dropout, Batch Normalization - в поисках серебряной пули. Как я научился искать размытые фотографии.

Статья » https://imageman72.livejournal.com/49930.html
Код » https://github.com/Imageman/blur_detect_small

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python #буднипрограммиста #programming

🔗 Dropout, Batch Normalization - в поисках серебряной пули. Как я научился искать размытые фотографии
Понадобилось мне сделать набор резких картинок (т.е. из большого набора выкинуть все нерезкие фотографии, как на примере ниже) Сначала я попробовал старые классические методы (сразу же в поисковике выскакивает Laplacian - простенький сверточный фильтр). Для отсеивания явного брака может сгодится,…

➰ Источник ВК

​Автоматическое выравнивание несбалансированности классов.
Код » https://github.com/ufoym/imbalanced-dataset-sampler

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python #буднипрограммиста #programming

🔗 GitHub - ufoym/imbalanced-dataset-sampler: A (PyTorch) imbalanced dataset sampler for oversampling l
A (PyTorch) imbalanced dataset sampler for oversampling low frequent classes and undersampling high frequent ones. - GitHub - ufoym/imbalanced-dataset-sampler: A (PyTorch) imbalanced dataset sample...

➰ Источник ВК

​Создайте свой REST API с использование готового шаблона. Шаблон для построения API с помощью фреймворка FastAPI и ORM Peewee можно взять по ссылке ниже. Для аутентификации используется токен JWT.

Код » https://github.com/the-lans/FastAPITemplate

#github #machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #python #буднипрограммиста #programming

🔗 GitHub - the-lans/FastAPITemplate: Шаблон для построения API с помощью фреймворка FastAPI и ORM Peew
Шаблон для построения API с помощью фреймворка FastAPI и ORM Peewee. Для аутентификации используется JWT. - GitHub - the-lans/FastAPITemplate: Шаблон для построения API с помощью фреймворка FastAPI...

➰ Источник ВК

#реклама

24 сентября будет облачно, потому что пройдет Yandex Scale (крупнейшая конференция платформы Yandex.Cloud)

За весь день планируются более 30 докладов в 5 потоках: Infrastructure, Data Platform, Security, Cloud-native, ML & AI
Поделюсь заинтересовавшими меня докладами:

- Облачное поколение ноутбуков — от тетрадок к сфере данных: ребята расскажут про DataSphere, у меня тут есть много вопросов спикеру, держитесь =)
- Программа содействия образованию и науке в области Computer Science: это очень круто, такое есть у многих облаков, но всегда есть вопросы, а достучаться до Яндекса явно проще
- Рекомендательная система на базе DataSphere: прям интересно, какую рек.систему можно построить и показать за 40 минут
- Расскажите какие доклады и почему заинтересовали вас в комментах к посту

Мы на нескольких проектах уже перешли или задумываемся над переходом на Yandex.Cloud. Недавно даже протестировали часть задач на GPU в DataSphere. Потому я обязательно зайду задать вопросы и узнать о новостях и скорейших релизах.

Конференция пройдет онлайн, участие бесплатное. Программа и регистрация тут: https://scale.yandex.ru/
За новостями и деталями можно следить на официальном канале конференции @yandexscale.

​​Слышали о Neuralink?

⚡️Все о нейроинтерфейсе Илона Маска тут!

Админ канала Neuralink делится инсайдами о разработке, о которых не знает никто!

Заходи и разбирайся в нейроинтерфейсах уже сейчас, пока другие даже не в курсе, что айфон с андройдом скоро станет прошлым веком цивилизации! На канале ты узнаешь когда и где купить акции Neuralink и как приобрести устройство первым!

Подписывайтесь, пока есть возможность - Neuralink

​Нейросети в валютной торговле - от теории к практике.
https://www.mql5.com/ru/articles/497
Язык написания MQL5. Исходный код прилагается.

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #mql #буднипрограммиста #programming

🔗 Нейронные сети - от теории к практике
В наше время, наверное, каждый трейдер слышал о нейронных сетях и знает, как это круто. В представлении большинства те, которые в них разбираются, это какие-то чуть ли не сверхчеловеки. В этой статье я постараюсь рассказать, как устроена нейросеть, что с ней можно делать и покажу практические примеры её использования.


📝 497.zip - 💾4 975

➰ Источник ВК

​#event@changellengeglobal #Changellenge

GeekBrains и Changellenge » записали бесплатную карьерную лекцию, которая поможет перестать бояться отбора и получить оффер от топовой компании. Лекция будет полезна студентам, молодым специалистам без внушительного опыта работы и всем тем, кто еще не определился, в какой сфере строить карьеру.

О чем будем говорить:

— Где брать опыт, когда ты еще студент?
— Как составлять резюме?
— Как писать сопроводительное письмо?
— Какие есть виды и этапы отбора в компании?
— Как проявить себя в первый месяц работы?
— Обязательно ли высшее образование и магистратура, чтобы стать профи?
— Как менять сферу деятельности, если понимаешь, что это не твое?

Все слушатели лекции получат гарантированные подарки от GeekBrains и Changellenge »:

— конспект лекции с ключевыми поинтами;
— чек-лист по составлению резюме;
— карьерный гайд Shift+Enter для IT-специалистов.

Enjoy: https://clck.ru/Wam5k

🔗 Анбоксинг молодого специалиста с Changellenge >> и GeekBrains: как запустить топовую карьеру
Актуальные новости о вебинарах, конференциях, стажировках, кейс-чемпионатах и образова...

➰ Источник ВК

​Intel – лидер отрасли, который создает технологии и решения, меняющие мир. Российское подразделение компании Intel является крупнейшим за пределами США центром по разработке программного обеспечения.
Заполни заявку на вакансию DevOps инженера и присоединяйся к команде экспертов: http://career.intel.com/tp/rj6.gOAO1-e_K

🔗 DevOps Engineer Careers at Intel in Nizhni,
Intel has a great career opportunity for a DevOps Engineer in Nizhni,

➰ Источник ВК

​L1- и L2-регуляризация в машинном обучении
📖https://docs.microsoft.com/ru-ru/archive/msdn-magazine/2015/february/test-run-l1-and-l2-regularization-for-machine-learning
📖https://www.machinelearningmastery.ru/only-numpy-implementing-different-combination-of-l1-norm-l2-norm-l1-regularization-and-14b01a9773b/
📖https://ru.wikipedia.org/wiki/%D0%A0%D0%B5%D0%B3%D1%83%D0%BB%D1%8F%D1%80%D0%B8%D0%B7%D0%B0%D1%86%D0%B8%D1%8F_(%D0%BC%D0%B0%D1%82%D0%B5%D0%BC%D0%B0%D1%82%D0%B8%D0%BA%D0%B0)

#machinelearning #ai #машинноеобучение #neuralnetworks #нейронныесети #буднипрограммиста #programming

🔗 Тесты - L1- и L2-регуляризация в машинном обучении

➰ Источник ВК