Проект: классификация комментариев

Проект находится в файле nlp_project.ipynb

Описание проекта:

Интернет-магазин запускает новый сервис. Теперь пользователи могут редактировать и дополнять описания товаров, как в вики-сообществах. То есть клиенты предлагают свои правки и комментируют изменения других. Магазину нужен инструмент, который будет искать токсичные комментарии и отправлять их на модерацию.

Задачи проекта:

1. Провести предобработку данных: лемматизировать текст, убрать стоп-слова и прочие символы, и тд

2. Обучить модель классифицировать комментарии на позитивные и негативные. В нашем распоряжении набор данных с разметкой о токсичности правок.

3. Постройте модель со значением метрики качества F1 не меньше 0.75.

Стэк:

pandas numpy spacy sklearn lightgbm catboost