Компьютерный анализ естественного языка

Материал из Информационная безопасностя
Перейти к навигации Перейти к поиску

Ответ

  • Одной из первых задач анализа текста была задача машинного перевода.
  • Первые эксперименты по машинному переводу в паре английский-русский язык были выполнены в 1950-х годах.
  • Задачи решаемые в рамках анализа естественного языка:
    • Создание диалоговой системы способной вести общение с человеком.
    • Создание вопросно-ответных систем, которые могут ответить на заданный вопрос.
    • Распознавание и синтез речи.
    • Задача извлечения информации из текста.
      • Это возможно при выявлении некоторых сущностей в тексте и установлении их взаимоотношений.
    • Задачи классификации текстов.
    • Задачи резюмирования текстов.
    • Задачи связанные с анализом социальных сетей и извлечением мнений.
  • Возможен анализ текста как последовательности букв без относительно знаний о структуре языка или с применением этих знаний применяя
    • морфологический анализ: установление части речи, число, род, падеж;
    • синтаксический анализ: установление синтаксических зависимостей между словами в рамках предложения;
    • семантический анализ.
  • В последние годы часто в анализе естественного языка используется глубокое машинное обучение и нейронные сети.