1. Разработать собственный токенизатор, в котором для каждого токена будет присваиваться его тип: «слово», «имя собственное», «год», «дата» и пр. Допускается адаптация готовых реализаций. Например, в NLTK или Stanza. 2. Подобрать текст не менее 1800 символов, но не более 3600 символов на русском языке с вкраплениями латинизированных названий. В тексте должно быть не менее пяти различных видов токенов. 3. Оценить работу собственного токенизатора, описать ошибки и возможные решения. сформулировать цель, задачи, используемый инструментарий, описать материал и прикрепить результаты: код, вывод и свои комментарии (оценка работы, достоинства и недостатки, предложения по улучшению и пр. информация). 4. Оформить результаты работы в виде отчета.
Наталия
МПГУ
Руслан, я словами не могу выразить Вам свою благодарность! Я не ожидала, что такая объемна...
buyko
СПбГТИ(ТУ)
Работу оценили на максимальный балл,заказывала сразу 2 работы,без единого замечания.
Галина
московский университет С. Ю. Витте
Спасибо, большое! Заказ выполнен вовремя, от преподавателя нет никаких замечаний. Всем рек...
Эльвира
РЭУ им. Плеханова
Задание выполнено отлично! 19 баллов из 20 возможных! Спасибо большое:)