Семинар. Обработка текста.

Занятие ведёт Антон Астахов. Ссылка на материалы занятия: https://github.com/DeepLearningSchool/part_2_nlp/blob/main/week_01_intro_to_nlp_embeddings/Practice/text_preprocessing_and_classification.ipynb Серия "Введение в NLP" Часть 1. Введение в NLP: https://youtu.be/d0oV1MZ_KdE Часть 2. Обработка текста: https://youtu.be/Aa-p8ddbxpQ Часть 3. Решение задачи классификации текста: https://youtu.be/ltyWeIPrAVA 00:00 Начало 00:37 Токенизация 02:08 Библиотека Razdel для токенизации 02:58 Библиотека Natasha (хороша для русского текста) 08:48 N-grams 11:04 Стоп-слова 15:17 Стемминг vs Лемматизация 21:12 Part of Speech 23:11 Named entities recognition --- --- Deep Learning School при ФПМИ МФТИ Каждые полгода мы запускаем новую итерацию нашего двухсеместрового практического онлайн-курса по глубокому обучению. Наборы проводятся в августе-сентябре и январе-феврале. Поддержать канал можно по ссылке https://dls.samcs.ru/boost За нашими новостями можно следить здесь: Наш канал в TG: https://t.me/deep_learning_school_news Официальный сайт: https://dls.samcs.ru/ Официальная группа ВК: https://vk.com/dlschool_mipt ФПМИ МФТИ Официальный сайт: https://mipt.ru/education/schools/fpmi https://vk.com/miptfpmi — сообщество ФПМИ https://t.me/fpmi_mipt — канал ФПМИ в ТГ https://vk.com/abitu — сообщество абитуриентов https://t.me/fpmi_abitu — ТГ-чат абитуриентов https://t.me/fpmi_abitu_master — все о магистерских программах ФПМИ Магистратура: https://mipt.ru/education/departments/fpmi/master/ Онлайн-магистратура "Современная комбинаторика": http://omscmipt.ru/ Онлайн-магистратура "Цифровая экономика": http://digec.online/ Лаборатории ФПМИ: https://mipt.ru/education/departments/fpmi/labs/