Системы обработки связных текстов

Системы данного класса моделируют процесс понимания законченных описаний каких-либо фрагментов действительности (например, исторических эпизодов), выраженных в виде текста на естественном языке, т.е последовательности связанных друг с другом предложений.

Понимание текста трактуется как извлечение из него всей существенной информации и присоединение ее к собственной базе знаний. После этого система может отвечать на вопросы относительно фактов, событий, явлений, которые были описаны в текстах.

В настоящее время актуальна проблема извлечения знаний из информации, скаченной из Интернет для последующей классификации и удобного поиска.

Методы и модели систем обработки связных текстов могут быть полезны при создании интеллектуальных систем автоматического индексирования и реферирования.

Примерами таких систем являются RESEARCHER и TAILOR, которые образуют единый комплекс, позволяющий пользователю получать сведения из рефератов, патентов.

RESEARCHER получает рефераты патентов на английском языке и строит на их основе базу знаний, делает обобщения из различных патентов. Внутреннее представление рефератов патентов включает следующие виды информации:

· Иерархические описания, отражающие деление объектов на компоненты;

· Физические и функциональные отношения между компонентами;

· Свойства объектов.

Вопрос-ответные функции выполняет программа TAILOR.

3. Обобщенная система языковой ЕЯ-системы

Традиционные средства общения ориентированы на использование заранее разработанных и неизменяемых приложений. Например, система продажи авиационных билетов.

Низкая эффективность и неприемлемость традиционных средств общения вызвана тем, что в них не учитываются особенности процесса общения, направленного на удовлетворение реальных информационных потребностей пользователя (ИПП). Особенности заключаются в следующем:

1. Изменяемость ИПП не может быть заранее определена в спецификации на разработку системы;

2. Несовпадение взглядов на мир у пользователя и заложенные в систему;

3. Связность общения. Процесс общения не может быть ограничен парой вопрос-ответ;

4. «Неправильность» высказываний пользователя требует ввода только правильных предложений. Это отклонения от грамматических норм, неоднозначное толкование и т.п.

При разработке этих систем включаются знания из других: - лингвистики; психологии; логики; философии.

При реализации этих систем этап взаимодействия человека через программиста отпадает.

Обобщенная система естественно языковой ЕЯ-системы, обеспечивающая взаимодействие конечного пользователя с ЭВМ должна обладать следующими обязательными функциями (см. рисунок 2):

1. Ведение диалогов - определение структуры и роли системы в текущем шаге диалога.

2. Понимание - преобразование поступающих от пользователя высказываний на естественным языке на язык внутреннего представления.

3. Обработка высказываний - формулирование и определение знаний.

4. Генерация высказывания - формулирование выходных высказываний на естественном языке.

При реализации конкретных ЕЯ-систем данные функции могут видоизменяться и дополняться. Любая ЕЯ-система может быть представлена в виде 3-х компонентов:

- диалоговый компонент;

- компонент понимания высказывания;

- компонент генерации высказывания.