BigData Team (BDT)
758 subscribers
411 photos
13 videos
296 links
BigData Team: the way you learn best

Практико-ориентированное обучение по Big Data, Machine Learning, промышленной разработке на Python.

https://bigdatateam.org/ru

Чтобы бустнуть: https://xn--r1a.website/boost/bigdatateam
Download Telegram
🚀Курс BDMLE × Tech Orda

38 грантов по 400 000 ₸ на обучение Big Data / Machine Learning Engineer для граждан Казахстана

❤️‍🔥 BDMLE — это более полугода глубокой прокачки на флагманских курсах BigData Team. 
— Python для анализа (больших) данных
— Промышленная разработка на Python
— Практический курс по Big Data (трек BDE)
— Практический курс по Machine Learning (трек MLE)

📌 Как подать заявку? До 21 сентября:
1️⃣ Подай заявку на портале Astana Hub
2️⃣ Зарегистрируйся и пройди тестирование на платформе Learn BDT💻:
 — открой разделы grant, grant extended, grant profile и CV
 — выполни все тесты и загрузи резюме
3️⃣ Жди результаты на почту — и подпишись на наш Telegram, чтобы не пропустить новости

📌 Ключевая информация:

▶️ Видео о Школе и курсе BDMLE (9 минут)
📅 Отбор: август-сентябрь
🚀 Старт обучения: октябрь

🔄 Волны отбора:
— I волна — до 17 августа, 23:59
— II волна — до 24 августа, 23:59
— III волна — до 31 августа, 23:59
— IV волна — до 7 сентября, 23:59
— V волна — 14 сентября, 23:59
— VI волна — 21 сентября, 23:59

📩 Вопросы: techorda@bigdatateam.org
🙏 Поддержите пост лайком или репостом — возможно, кто-то из ваших знакомых ищет именно такую возможность!

P.S. А еще есть гранты для участников из любых стран, читайте о них тут😉

BigData Team: the way you learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#study #BDMLE #BigDataTeam #TechOrda #AstanaHub
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥10❤‍🔥6😍3
🎯 Big Data и Machine Learning — в чём разница и как они связаны?

Сегодня эти слова звучат отовсюду — и действительно, и Big Data, и ML стали важнейшими направлениями в IT. Давайте разберёмся, что это такое и зачем они нужны бизнесу и разработчикам.

🚀🚀🚀 — это про инфраструктуру и масштаб.
Когда данных становится слишком много — привычные подходы больше не работают.
Big Data — это про то, как сделать анализ и машинное обучение возможными при работе с миллионами записей, терабайтами логов и потоком данных в реальном времени.

💡 Это не просто собирать информацию —
это строить системы, которые позволяют обрабатывать всё это эффективно:
— быстро,
— параллельно,
— надёжно,
— и без потерь.

Простые алгоритмы + больше данных > сложные алгоритмы + мало данных
Поэтому Big Data — это фундамент, на котором строится многое в современном ML.

🚀🚀🚀🚀🚀 — это не магия и не слайды про ИИ.
ИИ — это когда в презентации.
ML — это когда на Python. С датасетами, ошибками и дебагом до глубокой ночи.

По факту: ML — это когда алгоритмы учатся находить закономерности в данных,
а не просто следуют заранее заданным правилам.
Сначала ты кормишь модель данными.
Потом она начинает предсказывать.
А потом ты — обучаешься на собственных ошибках вместе с ней😅

ML позволяет:
— распознавать тексты, изображения и речь,
— прогнозировать спрос и цены,
— рекомендовать товары и контент,
— автоматизировать принятие решений.

🤝 Связь Big Data и ML
Без Big Data у нас не было бы качественного ML — ведь модели учатся именно на данных.
А без ML — было бы почти невозможно извлекать пользу из этих гор информации.

🤔 MLE или BDE — что выбрать?
На старте почти все студенты не знают, какой трек ближе: MLE или BDE. Поэтому первые две части курса BDMLE мы сделали общими — вы попробуете и аналитику, и разработку.

💻 Python для анализа больших данных — разберетесь, чем живет дата-аналитик: анализ, визуализация, математика.
💻 Промышленная разработка на Python — полное погружение в разработку: архитектура, приложения, тесты.

После этих двух блоков вы уже «пощупали» обе стороны и можете осознанно выбрать ваш путь: BDE или MLE.

👉 Подайте заявку до 17 августа — грант 400 000 ₸ от Tech Orda для граждан Казахстана

BigData Team: the way you learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#study #BDMLE #BigDataTeam #TechOrda #AstanaHub
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9❤‍🔥63
Please open Telegram to view this post
VIEW IN TELEGRAM
💻 Bash-трюки, которые сэкономят тебе пару часов уже сегодня

Иногда кажется, что консоль — это скучно и «только для админов».
Но как только осваиваешь пару приёмов — начинаешь двигаться по проекту быстрее, находить нужное и обрабатывать данные, не отвлекаясь на лишние окна.

📂 Поиск файлов
Быстро найти подстроку во всех .log-файлах в текущей папке и подпапках:
grep -nHr --include=*.log error .
# или через find:
find . -name "*.log" -exec grep -nH error '{}' '+'

Найти пять самых «тяжелых» файлов в папке и ее подпапках:
find . -type f -exec stat -c '%s %n' '{}' '+' | sort -rn | head -5

— Найти самые большие файлы только в текущей папке
ls -lrhS

📊 Работа с датасетами
Посчитать строки в датасете:
wc -l data.csv

Посмотреть первые строки датасета:
head -n 20 data.csv

🌐 Загрузка и архивы
Скачать файл и сразу передать его на распаковку
curl -s https://example.com/data.tar.gz | tar -vxz

— Запустить на удаленной машине одну команду (например проверить свободное место) и сразу завершить соединение
ssh user@host df -h /

Чем меньше времени уходит на рутину — тем быстрее появляются результаты, будь то аналитика или машинное обучение.

Мы начинаем с таких команд уже в первом модуле BDMLE — чтобы потом спокойно работать с миллионами строк данных и реальными кластерами.

📌 Успей подать заявку до 17 августа — грант 400 000 ₸ от Tech Orda для граждан Казахстана🇰🇿.

BigData Team: the way you learn best

#study #BDMLE #BigDataTeam #TechOrda #AstanaHub
🔥6❤‍🔥5👍3
🇰🇿 Сделано в Казахстане — для всего мира

BigData Team — это международная команда экспертов, работавших в Amazon AWS, Samsung, Yandex, Ebay.

Мы создаём IT-образование мирового уровня здесь, в Казахстане, с грантовой поддержкой Tech Orda и Astana Hub. История началась шесть лет назад, когда мы начали обучать в Казахстане ведущих специалистов в сфере Big Data и Machine Learning.

🔥А сегодня открываем набор на 36 международных грантов с поддержкой наших партнеров, чтобы к нашим слушателям из Казахстана присоединились коллеги со всего мира.

🇰🇿 Если вы из Казахстана
— гранты Tech Orda покрывают более 50% обучения
подробности и инструкции, успейте до конца августа!

🌍 Если вы из другой страны
— 32 международных гранта с покрытием 50% (~950 $)
— 4 гранта с покрытием 100% (~1 900 $)

📚 8 месяцев обучения:
— общая база по Python, промышленной разработке, Big Data и ML
— в конце — твой выбор трека: Big Data Engineer или Machine Learning Engineer
— 10–20 часов в неделю, онлайн, с менторами и проектами

📅 Дедлайны международных грантов:
— I волна — до 24 августа, 23:59
— II волна — до 31 августа, 23:59
— III волна — до 7 сентября, 23:59
— IV волна — до 14 сентября, 23:59
— V волна — до 21 сентября, 23:59

🤝 И да, мы ждём участников минимум из 5 стран — так что зовите друзей, коллег и бывших однокурсников.

📌 Как подать заявку на международный грант
1️⃣ Зарегистрируйтесь и пройдите тестирование на платформе Learn BDT💻:
— откройте разделы grant, grant extended, grant profile и CV
 — выполните все тесты и загрузите резюме
2️⃣ Ждите результаты на почту — и подпишитесь на наш Telegram, чтобы не пропустить новости

Заполняйте заявку на грант и подавайтесь до ближайшего дедлайна (вот тут объяснили почему раньше — лучше).

❗️ Частые ошибки при подаче

Удачи! 🍀

BigData Team: the way you learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#study #BDMLE #BigDataTeam
Please open Telegram to view this post
VIEW IN TELEGRAM
8🔥8👏4🥰3👍1
🔬 Наука vs индустрия: как выбрать свой путь

После университета встаёт классический вопрос: остаться в науке или уйти в индустрию? Это две перпендикулярные траектории или можно совместить?

На встрече поговорим:
– чем отличается жизнь в исследовательской группе от работы в компании;
– где больше свободы, ответственности и рисков;
– что выбирают мои коллеги в IT и предпринимательстве — и с какими результатами.

В основе — мой опыт и истории людей, побывавших на стульях ученых, инженеров и предпринимателей.

📅 28 августа, 19:00 (Мск) / 21:00 (Алматы)
📍 формат: онлайн
👉 регистрируйтесь по ссылке — пришлём доступ в день лекции.

P.S. Большое спасибо всем, кто поделился своим опытом для подготовки доклада, а также дополнениями на лекции в ШМТБ.

// подружиться в 👉 LinkedIn | Facebook | Instagram
#life #study
6🔥6💯2
🎓 Как подать заявку на грант BDMLE?

Чтобы не запутаться в условиях подачи на гранты Big Data / Machine Learning Engineer, сделали инфографику.

Подробнее о каждом конкурсе:
🇰🇿 Граждане Казахстана — конкурс Tech Orda
🌍 Участники из других стран — международные гранты

👉 Сохраняйте картинку и подавайте заявку заранее — это повышает шансы пройти отбор. Если вы не прошли в своей волне, заявка автоматически переносится на следующую.

🎁 Граждане Казахстана, не получившие гранты Tech Orda, попадают в третью волну отбора на международные гранты.

Ищем тех, кто готов менять будущее вместе с нами.

BigData Team: the way you learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#study #BDMLE #BigDataTeam #TechOrda #AstanaHub
❤‍🔥431🔥1
🎓 BDMLE × Tech Orda, результаты отбора — волна I

Отчитываемся по итогам первой волны конкурса на гранты Tech Orda 🚀

На курс BDMLE выделено 38 грантов от Tech Orda по 400,000 ₸.

По итогам I волны мы отправили предложения на согласование грантов ТОП-5 кандидатам (~10% грантов). Все остальные участники автоматически переходят в II волну, где распределим до 50% грантов.

📅 Даты волн:
— I волна: тестирование до 17.08 23.59
— II волна: тестирование до 24.08 23.59
— III волна: тестирование до 31.08 23.59

📩 Со всеми кандидатами I волны мы связались по почте. Если вдруг письмо не дошло — проверьте «Спам» или напишите на techorda@bigdatateam.org (можно и в комментариях к этому посту).

Истории успеха для вдохновения: раз, два и три.

Всем удачи!

BigData Team: the way your learn best
#work #study #BigDataTeam #TechOrda #AstanaHub
8👍2🔥1👏1
Media is too big
VIEW IN TELEGRAM
🎥 Алексей Драль рассказывает о международных грантах

Big Data / ML Engineer: условия, дедлайны и как принять участие

Подробнее о каждом конкурсе:
🇰🇿 Граждане Казахстана — конкурс Tech Orda
🌍 Участники из других стран — международные гранты

BigData Team: the way you learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#study #BDMLE #BigDataTeam #TechOrda #AstanaHub
4❤‍🔥3💯2
🎓 Подались на грант, но не уверены, что всё сделали правильно?

Мы собрали типичные ошибки при подаче и простые шаги, которые реально повышают шанс получить поддержку.

Листайте карусель 👉 и проверьте себя, чтобы ваша заявка точно не осталась без внимания.

Даже маленький шаг сегодня = больше возможностей завтра. Дерзайте!

BigData Team: the way your learn best
#work #study #BigDataTeam #TechOrda #AstanaHub
6❤‍🔥3🔥2
🔝 Разговоры про ИИ: встреча с Александром Гущиным

31 августа, в воскресенье, приглашаем вас на онлайн-встречу с Александром Гущиным — ML-инженером, преподавателем и одним из сильнейших экспертов в области искусственного интеллекта.

Несколько фактов об Александре:

1️⃣ Вошёл в TOP-5 Kaggle в 2017 году.
2️⃣ Работал Fullstack ML Engineer в Iterative AI. Если вы работаете в DS, то вполне вероятно пользуетесь его разработками (e.g. DVC).
3️⃣ Преподаёт в СНГ и за рубежом, делится опытом с начинающими и продвинутыми.
4️⃣ Руководит подготовкой школьников и сборной России к международной олимпиаде по AI (IOAI).

🔥 Чтобы больше ребят получили доступ к качественному обучению, Александр с коллегами предоставили 36 международных грантов на курс BDMLE (32 — с покрытием 50%, 4 — с покрытием 100%).

📅 Когда: 31 августа, 15:00 (Мск) / 17:00 (Алматы)
📍 Формат: онлайн

👉 Зарегистрируйтесь по ссылке — доступ к встрече пришлём в день эфира. Будет открытый разговор про то, как проходят олимпиады по ИИ и подготовка к ним, как строить карьеру в этой сфере, а еще — про личный взгляд Александра на образование.

И конечно, не забудьте подписаться на телеграм-канал Александра — там ещё больше инсайтов про ИИ.

P.S. Уже в этот четверг — открытая лекция с Алексеем Дралем про карьеру в науке и индустрии.

BigData Team: the way your learn best
#work #study #BigDataTeam #meetup
4🔥3🎉2👏1🤩1
🚀Мы уже начали!

Лекция Наука vs индустрия: как выбрать свой путь

На встрече поговорим:
– чем отличается жизнь в исследовательской группе от работы в компании;
– где больше свободы, ответственности и рисков;
– что выбирают мои коллеги в IT и предпринимательстве — и с какими результатами.

28 августа (чт), 19:00 (Мск) / 21:00 (Алматы)
Формат: онлайн

👉
Присоединиться

BigData Team: the way your learn best
#work #study #BigDataTeam #meetup
4🔥3👏1
🎓 BDMLE × Tech Orda, результаты отбора — волна II

Отчитываемся по итогам второй волны конкурса на гранты Tech Orda 🚀

На курс BDMLE выделено 38 грантов от Tech Orda по 400,000 ₸.

По итогам II волны мы отправили предложения на согласование грантов ТОП-20 кандидатам (~50% грантов). Все остальные участники автоматически переходят в III волну, где мы распределим оставшиеся гранты.

📅 Даты волн:
— I волна: тестирование до 17.08 23.59
— II волна: тестирование до 24.08 23.59
— III волна: тестирование до 31.08 23.59

📩 Со всеми кандидатами II волны мы связались по почте. Если вдруг письмо не дошло — проверьте «Спам» или напишите на techorda@bigdatateam.org (можно и в комментариях к этому посту).

🚀 Подробная инструкция, как подать на грант Tech Orda.
📍 Перед отправкой заявки загляните в частые ошибки при подаче, чтобы ничего не упустить.

💫 Истории успеха для вдохновения: раз, два и три.

Всем удачи!

BigData Team: the way your learn best
#work #study #BigDataTeam #TechOrda #AstanaHub
🔥64👍1
🔝 Разговоры про ИИ: встреча с Ануаром Аймолдиным

31 августа, в воскресенье, на онлайн-встречу с Александром Гущиным присоединится особенный гость — Ануар Аймолдин, имя которого хорошо знают во всём AI-комьюнити Центральной Азии. Его путь в науке и индустрии — пример того, как можно совмещать мировую экспертизу и вклад в развитие локального сообщества.

Несколько фактов об Ануаре:

1️⃣ Фаундер DSML.KZ — крупнейшее Data&AI сообщество в Центральной Азии
2️⃣ ТОП-14 Kaggle
3️⃣ AI ресерчер с глобальным индустриальным опытом (Австралия, Австрия, ОАЭ), PhD researcher MBZUAI
4️⃣ Организатор Республиканской AI Олимпиады в Казахстане (4 место на IOAI)

📅 Когда: 31 августа, 15:00 (Мск) / 17:00 (Алматы)
📍 Формат: онлайн

На встрече Ануар поделится личным взглядом на образование и карьеру в AI, расскажет про свой путь и про то, как формируются олимпиады по ИИ и зачем они нужны индустрии.

И самое важное — вместе с Александром Гущиным они расскажут о подготовке школьников к Международной олимпиаде по искусственному интеллекту (IOAI). Это редкий шанс услышать сразу двух людей, которые реально двигают комьюнити вперёд.

👉 Зарегистрируйтесь по ссылке — доступ к встрече пришлем в день эфира.

И конечно, не забудьте подписаться на телеграм-канал Ануара — там всегда самые свежие новости Data&AI Сообщества DSML KZ.

BigData Team: the way your learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#work #study #BigDataTeam #meetup
🔥11❤‍🔥22👍1
🔝 Разговоры про ИИ: встреча с Александром Гущиным и Ануаром Аймолдиным

Уже сегодня приглашаем вас на онлайн-встречу с двумя яркими представителями AI-комьюнити — Александром Гущиным и Ануаром Аймолдиным.

О спикерах:
Александр Гущин — ТОП-5 Kaggle (2017), работал Fullstack ML Engineer в Iterative AI, преподаватель и наставник, который готовит школьников и студентов к международным соревнованиям IOAI.
Ануар Аймолдин — фаундер DSML.KZ (крупнейшее Data&AI сообщество в Центральной Азии), ТОП-14 Kaggle, AI Researcher с международным опытом (Австралия, Австрия, ОАЭ), PhD researcher в MBZUAI, организатор Республиканской AI Олимпиады в Казахстане (4 место на IOAI).

Модератор: Алексей Драль, CEO BigData Team

📅 Когда: сегодня, 31 августа, 15:00 (Мск) / 17:00 (Алматы)
📍 Формат: онлайн

В разговоре — о том, как как строится подготовка школьников к Международной олимпиаде (IOAI), какие возможности открываются в AI сегодня и какой путь может пройти каждый — от первых шагов до международного уровня.

Присоединиться 👇

👉 Зарегистрируйтесь по ссылке — доступ к встрече пришлем в день эфира.

BigData Team: the way your learn best
Py4BDA | Python | Machine Learning | Big Data | BD/ML Engineer

#work #study #BigDataTeam #meetup
🔥73❤‍🔥2💯1