Розпізнавання іменованих об’єктів (NER)

Визначення

Розпізнавання іменованих сутностей (NER) – це завдання NLP, яке ідентифікує та класифікує сутності в тексті, такі як люди, організації, місця розташування, дати або продукти.

Мета

Мета полягає в структуруванні неструктурованого тексту шляхом вилучення ключових сутностей. Це підтримує пошук, вилучення інформації та побудову графів знань.

Значення

• Фундамент для пошуку інформації та конвеєрів NLP.
• Помилки поширюються на наступні програми.
• Для NER, специфічного для певної предметної області (наприклад, медичного, юридичного), потрібні спеціальні набори даних.
• Пов'язано з такими завданнями, як зв'язування сутностей та вилучення зв'язків.

Як це працює

1. Зібрати та попередньо обробити текст.
2. Анотуйте набори даних категоріями сутностей.
3. Навчайте моделі на позначених прикладах (CRF, трансформатори).
4. Передбачати об'єкти в невидимому тексті.
5. Перевірте точність за допомогою тестових даних.

Приклади (реальний світ)

• spaCy: бібліотека NLP з відкритим кодом та вбудованим NER.
• Stanford CoreNLP: надає інструменти розпізнавання іменованих сутностей.
• Фінансове НЛП: витягує назви компаній зі звітів.

Література / Додаткова література

• Юрафскі та Мартін. Обробка мовлення та мови. Стенфорд.
• Лампл та ін. «Нейронні архітектури для розпізнавання іменованих сутностей». ACL.
• Моделі трансформерів NER, що обіймають обличчя.
• Що таке розпізнавання іменованих сутностей (NER)