↪️ TD-IDF и векторизация текста

С чего начать работать с NLP? Конечно, с векторизации, то есть конвертации текста в числа, которые в дальнейшем могут использоваться в алгоритмах ⚙️

Один из лучших подходов здесь – это TD-IDF. Принцип такой: если слово встречается в каком-либо документе часто, при этом встречаясь редко во всех остальных документах — это слово имеет большую значимость для того самого документа. И напротив, например, предлоги неважны, потому что встречаются везде.

#NLP #ML

Data Secrets

✏️ Для любителей математики

Нашли крутейший сборник задач по машинному обучению с решениями. Автор – лектор Эдинбургского университета М.Гутманн.

Разбираются следующие темы ➡️ линейная алгебра, оптимизация, графы, марковские модели, метод Монте-Карло, а также вариационные выводы.

Кстати, кое-где мелькает и код на Python 🐍

Ссылка: https://arxiv.org/abs/2206.13446

#задачи

Ускоряем работу в Excel

💩 Допустим, нам нужно обработать много таблиц по одному и тому же шаблону. Делать всё вручную долго и неприятно. Надо записать макрос!

Показываем, как это сделать и как этим пользоваться (и добавляем еще одну фишку в конце) ⚡️

#excel

Data Secrets