|
ИСТИНА |
Войти в систему Регистрация |
ИПМех РАН |
||
Классификация веб-страниц на основе текстового содержимого с помощью языковой модели BERT (Bidirectional Encoder Representations from Transformers)дипломная работа (Бакалавр)
- Научный руководитель: Волкова Ирина Анатольевна
- Автор: Протасов Александр Васильевич
- Тип: Бакалавр
- Организация, в которой проходила защита: МГУ имени М.В. Ломоносова
- Год защиты: 2023
- Аннотация: Рассматривается задача классификации веб-страниц на основе текстового содержимого. Для ее решения предлагается использовать языковую модель BERT, демонстрируется, как увеличить несбалансированный набор данных с помощью аугментации текстов. Для выбора эффективной модели предлагается сравнить различные модификации BERT. В вычислительных экспериментах приводятся результаты работы выбранного классификатора и методов аугментации на двух коллекциях: данные проекта ‘FOSS News’ и новостные веб-страницы сайта lenta.ru. В рамках работы реализованы два приложения с графическим интерфейсом для демонстрации полученных результатов.
- Добавил в систему: Волкова Ирина Анатольевна