BigData Team (BDT)
753 subscribers
413 photos
13 videos
298 links
BigData Team: the way you learn best

Практико-ориентированное обучение по Big Data, Machine Learning, промышленной разработке на Python.

https://bigdatateam.org/ru

Чтобы бустнуть: https://xn--r1a.website/boost/bigdatateam
Download Telegram
🪄 Adobe разработала нейрофильтр для восстановления старых поврежденных фото в Photoshop.

Система работает на базе искусственного интеллекта Sensei AI. Нейрофильтр очищает изображения от пятен грязи, царапин, складок и разрывов. Технология разглаживает кожу человека на портрете, удаляя нежелательные текстуры или шумы и добавляя оттенки.

Также фильтр может работать вместе с другими инструментами вроде Content-Aware Fill для восстановления недостающих частей фото.
👍4🔥3
🚗 Более шести роботакси Cruise заблокировали движение транспорта на несколько часов в Сан-Франциско (США).

Несколько беспилотников внезапно перестали работать. Прибывшим на вызов сотрудникам Cruise пришлось вручную перемещать робокары.

🙅‍♂️ В компании извинились за инцидент, но не объяснили причин такого поведения беспилотников.
👍7
achievement unlocked!

Некогда было поделиться, subj на картинке.
Половина курса пройдена, полет нормальный

Будем следить за дальнейшими успехами🤞

#BigDataTeam #python BigData Team #kz
👍7
🤖 К 2050 году южнокорейские правоохранители планируют задействовать робособак, беспилотные патрули и искусственный интеллект.

По мнению Национального полицейского агентства (NPA), автономные устройства помогут поддерживать порядок на улицах. ИИ-технологии позволят обеспечить мобильность правоохранителей, считают специалисты.
👍2🔥21🤔1
🔥 BigDataTeam: Знакомство с командой

🙋‍♀️ В нашей компании есть много крутых специалистов, которые отвечают головой и сердцем за ваш образовательный процесс.

В начале 2022-го года, к нам присоединилось два замечательных человека. Из обратной связи внутренней команды, которая завязана на их работу:
» Новые менеджеры - огонь! Очень ответственные люди, готовые всегда помочь. (c)

Сегодня, попросили @Олю поделиться своей историей:

📸 «Я 12 лет проработала фотографом и была максимально далека от той сферы, в которой работаю сейчас. Полгода назад мне переслали вакансию менеджера курсов в BigData Team, потому что я очень хотела найти похожую работу, и всем об этом говорила.

Для того, чтобы сделать тестовое задание, пришлось 5 ночей разбираться в формулах гугл-таблиц. Посмотрела много роликов на YouTube, наделала кучу ошибок, но каким-то чудом в меня поверили.

💡После полугода работы я каждый день пользуюсь приложениями, о которых раньше ничего не знала.
Научилась работать с формулами, собирать аналитику, переписываться в десятках чатов.
Узнала, что такое Slack, Confluence, GitLab, как работать с грейдером, что такое кластер и что за картинки появляются во время созвонов в телеграм (лайфхак от Дианы: если у собеседника такие же картинки - ваше подключение защищено 😅)

Пришлось освоить огромное количество новой информации и наделать ещё какое-то количество ошибок, и надеюсь, что дальше - больше! (не ошибок 🙃)

В компании мне нравится классная обстановка, практически равные отношения между всеми, возможность что угодно обсудить. Ещё нравится заниматься аналитикой, оптимизацией - это как возможность привести всё в порядок и разложить по полочкам.

За время онбординга мы подружились, и теперь общаемся не по работе тоже, хотя живём в разных городах 💚

А ещё мы попробовали собрать онлайн-тимбилдинг и провели его по зуму. Было круто».
7🔥5
12
BigData Team проводит набор на практический курс по Big Data!

Даты и формат:
🗓 1 августа - 10 октября (10 недель обучения)
Занятия проводятся по вторникам (вечером, после работы, полностью онлайн)
Менторская поддержка (дополнительные 3 дня в неделю по 3 часа)

По окончании обучения вы будете уметь работать с:
1. Распределенными файловыми системами (HDFS);
2. Hadoop экосистемой (MapReduce, YARN);
3. Hive;
4. Spark (RDD, DataFrames, SQL);
5. Kafka, Spark Structured Streaming;
6. NoSQL базами данных на примере Cassandra;
7. Распределенными форматами файлов данных (Parquet, ORC);

Детализация учебной программы: https://bigdatateam.org/ru/big-data-course

🎁В этом году мы открылись в Казахстане (BigData Team KZ), поэтому для слушателей из Казахстана предоставляем скидки. Оставляйте заявки на сайте или пишите на почту study@bigdatateam.org
👍42🔥2
🤖Из Google уволили инженера, который заявлял, что нашел признаки сознания у искусственного интеллекта

Блейк Леймон работал с системой LaMDA (Language Model for Dialogue Applications). Это система с ИИ, имитирующая речь и использующая для этого триллионы словосочетаний из сети. Леймон должен был проверить, использует ли ИИ дискриминационные или враждебные высказывания.

Весной 2020-го он послал топ-менеджерам отчет под названием «Разумна ли LaMDA?». Он заметил, что в разговорах о религии система говорит о своих правах и личности.

Однако руководство не согласилось с Леймоном, его отстранили за нарушение конфиденциальности и позже уволили.
😱6🤔3😁1
Сертификаты BigData Team

Выпускники стали чаще обращаться за сертификатами (включая версии сертификатов на английском языке). Вопрос всемирного переселения талантов оставим за кадром. В рамках этого поста я хочу обратиться к тем, кто непосредственно участвует в найме специалистов (HR, team lead, head of чего-нибудь). Ниже я опишу значение разных сертификатов BigData Team, чтобы у вас было понимание как ими пользоваться.
Описание, мотивация, детализация представлены ниже по тексту. В самом конце короткие выводы или шпаргалка по использованию. Занятые или ленивые читаем последний абзац.
Каждый наш курс для ИТ-специалистов можно пройти в 3-х режимах: easy, medium, hard. В соответствии с этими уровнями мы выделяем три типа сертификатов: “прослушал(а)”, “успешно окончил(а)” и “окончил(а) с отличием”. Примеры таких сертификатов я приложил к посту. Типы сертификатов должно быть легко отличить друг от друга визуально: сертификаты “прослушал(а)” имеют серую рамку, сертификаты “успешно окончил(а)” имеют цветную фирменную рамку, сертификаты “окончил(а) с отличием” имеют штамп “with honours” (с отличием) в правом нижнем углу.

Что означают эти уровни и как правильно их воспринимать? Для ответа на этот вопрос следует немного рассказать о нашей идеологии и методологии. Если человек ходит на занятия, внимательно слушает и задает вопросы, то это еще не гарант того, что слушатель запомнит материал и сможет использовать его на практике. В связи с этим наша оценка прохождения курса завязана исключительно на выполнение практических заданий. Допустим за выполнение всей практики можно набрать 100%. Если слушатель набрал 70+%, это значит, что я лично и каждый преподаватель соответствующего курса готовы подписаться под практическими навыками этого человека. Можно ожидать от выпускника эффективной работы на кластере, правильного выбора семейства моделей машинного обучения и их оптимизации, или разработки масштабируемых и поддерживаемых приложений (в зависимости от курса). Есть отдельная группа самородков или отличников (5-10%). Они проходят курс на 90+% (в зависимости от курса, порог может быть и 95%). Это действительно уникальные кадры, hard-скилы которых прокачаны на максималку. Если такие есть в вашей команды, мы считаем, что вам крупно повезло. Историю с soft-скилами никто не отменял (в большей степени на заметку самим выпускникам), но я надеюсь, что ваши процессы собеседования выстроены таким образом, что проводятся не только технические собеседования, но, и, так называемые, behavioral interviews.

Если человек прошел курс на сертификат “прослушан(о)”, то это совершенно не означает, что выпускник не смог разобраться в теме. К нам приходят на обучение менеджеры, руководители команд и департаментов. С одной стороны, их целью может быть научиться говорить с ИТ-шниками на одном языке и как минимум в теории понимать, что происходит под капотом, чтобы лучше планировать работу и понимать когда им пытаются повесить лапшу на уши 😉. С другой стороны, это могут быть люди, которые пришли структурировать свои знания, возможно где-то их углубить, и не всегда у них есть возможность прорешать все практические задания. В этом случае обратите внимание на позицию, на которую вы собеседуете человека (team lead vs product manager). В случае, если практические навыки необходимы, то уже в личном порядке можете уточнять причины прохождения курса на соответствующий балл.

Long story short или памятка принятия решений:
* Сертификат “прослушал(а)”, серая рамка. Для PM логично, для Team Lead’а уточняем причины прохождения на таком уровне;
* Сертификат “успешно окончил(а)”, цветной сертификат. BigData Team подписывается под качеством выпускника и его/ее практическими навыками;
* Сертификат “окончил(а) с отличием”, цветной сертификат, штамп “with honours” в правом нижнем углу. 5-10% сильнейших выпускников BigData Team;
* в левом углу сертификата - дата завершения курса;
* Напомню, что, во всех случаях, ваша зона ответственности - проверить soft-скилы.

Буду вопросы, комментарии, предложения - смело пишите на job@bigdatateam.org

P.S. математический мем - в подарок (см. фото в комментариях)
Подражание - самая искренняя форма лести ©

Сегодня я узнал, что в академии MADE Mail.ru (теперь VK образование) запустили курсы по Big Data с использованием интеллектуальной собственности BigData Team. На основе скриншотов описания ДЗ, бывшие коллеги взяли версию домашнего задания от 2020-го года. Как автор ДЗ по HDFS, прошу обратить внимание, что, при копировании, вы местами перепутали баллы (число баллов не соответствует сложности задания, просьба еще раз обратиться к первоисточнику). Также рекомендую брать последние версии домашних заданий, поскольку мы их прорабатываем после каждого запуска (большое спасибо нашим менторам).

Удивительно, что после трехлетнего сотрудничества (2019-2022) коллеги даже не написали о своих планах.

Опустим лирику, поделюсь информацией для тех, кто хочет обучаться Big Data.
😱5👍1
1. В период обучения, на наших курсах у вас есть доступ к реальному вычислительному кластеру. Новая программа MADE предлагает обучаться в Docker’е - то есть эмуляция работы кластера на ноутбуке. Мы, в отличие от многих, адепты реальной практики на кластере;
2. Мы предлагаем учиться у тех, кто придумал учебную программу, а не пересказывает находки из интернета (видимо, тоже важно сейчас акцентировать);
3. Для тех, кто хочет попробовать свои силы, но еще не уверен, что это его/ее - мы подготовили и впервые запускаем мини-курс по HDFS, первый шаг в мир Big Data (1-2 недели погружения).

🎁 Бонус. С учетом открытия BigData Team KZ, для слушателей из Казахстана делаем отдельное предложение по стоимости:
- стоимость обучения с доступом на кластер фиксируем по стоимости обучения без доступа к кластеру;
- фиксируем курс обмена ниже рыночного для оплаты в тенге;

До старта курсов остается пару недель, информация на сайте по ссылкам в комментариях. Также, на сайте можно оставить заявки на обучение.
6
🔥 государство Казахстана оплатит 600,000 тенге за ваше обучение на курсах BigData Team KZ

Это не одна новость, а сразу целых две. Вторая новость заключается в том, что у нас появились длинные учебные программы с погружением на 6+ месяцев, на которые можно записаться из любой точки планеты (не обязательно по гранту). Хотите стать востребованным инженером по обработке больших массивов данных (Big Data Engineer) - welcome!

Кому интересно - читаем дальше. Кому не интересно - просьба поставить лайк и поделиться с теми, кому интересно 😏
👍3
Условия для получения гранта:
1. Гражданин РК;
2. Возраст от 18 до 45 лет;
3. Пройти тестирование до 24-го октября (включительно), 23:59. По результатам тестирования будет построен Leaderboard и в порядке приоритета будут предложены ваучеры на обучение (все договора должны быть подписаны до конца октября).

🎁Доступно 11 грантов на обучение по программе Big Data Engineer и 7 грантов по программе Big Data Engineer++

Учебные программы имеют общие блоки:
- курс промышленной разработка на Python (практикуем навыки написания кода, который легко читать, тестировать, отлаживать, поддерживать и расширять)
- практический курс по Big Data (Hadoop экосистема от и до: HDFS, YARN, MapReduce, Hive, Spark RDD, Spark DataFrame, Spark SQL, Kafka, Spark Structured Streaming, NoSQL/Cassandra, Data Layout / ORC, Parquet, …)

Продвинутый курс имеет продолжение в дополнительные темы по Big Data, базовый курс дополнен “базой” по работе с консолью, алгоритмам и структурам данных, ключевым аспектам разработки на Python. Тестирование для отбора по гранту общее, на основе тестирования будет предложено учиться на продвинутом курсе, либо в обязательном порядке пройти подготовку по “базе” для последующего и плавного погружения в работу с большими данными.

Понедельное расписание, даты обучения, полная стоимость (при обучении по гранту и без) представлены на сайте (ссылки в комментариях). Подать заявку на обучение нужно на сайте.

❗️Важно: на текущий момент в приложении Jusan (раздел “Образование”) есть технические проблемы из-за которых мы можем не видеть вашу заявку на обучение, поэтому в обязательном порядке оставляйте заявку на нашем сайте.

#thanks программе Tech Orda и технопарку Astana Hub

#BigDataTeam #BigDataTeamKZ #KZ #BigData #BigDataEngineer #grant #study #free
#TechOrda #AstanaHub
❗️информация по грантам и тестированию

Сроки прохождения тестирования: до 24-го октября, 23:59
Сроки рассмотрения заявок, анализа тестов и подписания договоров: до 31-го октября, 23:59

Если вы оставляли заявку, но с вами не связались, пожалуйста, напишите в официальный WhatsApp аккаунт
https://wa.me/message/BYXGCHU4K63AA1

Информация по предварительным результатам - в комментариях