Автоматический анализ текста

Проблема автоматического анализа текста не входит в число сугубо психолингвистических, однако она не может быть успешно решена без учета данных психолингвистики.

В конце XX в. количество электронных текстов и документов, существующих только в компьютерном варианте, возросло многократно и потребовало развития технологий, связанных с обработкой данных. Обработка документов, созданных на естественном языке (англ, natural language processing) — это новые технологии, помогающие человеку использовать электронные тексты и легко находить и обрабатывать документы^[1][2].

К примеру, резюмирование текста позволяет уменьшать его объем и сделать возможным его показ даже на миниатюрном дисплее мобильного телефона. Искусственное упрощение и обобщение текста способно помочь детям, пожилым людям, иностранцам легче понять его содержание. Для того чтобы осуществить компрессию (сжатие) текста, необходимо применять такие процедуры перефразирования, которые учитывали бы длину и стиль текста, его «читабельность», не нарушая при этом его смысла. Автоматический перифраз — это своего рода автоматический перевод информации в рамках одного и того же языка. К тому же способность к перефразированию тесно связана со способностью понимания речи. Психолингвисты (А. А. Леонтьев, 2003; Р. М. Фрумкина, 2001) полагают, что если может быть создана автоматизированная система, способная излагать текст иными словами, то она (пусть и на уровне формальной интерпретации) уже способна «понимать» текст, что, в свою очередь, очень важно для решения проблемы искусственного интеллекта. Одним из самых известных примеров подобной автоматической системы стала компьютерная программа «Элиза», общение с которой моделирует общение с психотерапевтом. Одна из модификаций этой программы Friend ЕСС Eliza (19, 208), может представляться окружающим (Я — компьютерный психолог), называя свое имя, начинает процедуру беседы (Расскажите, пожалуйста, о своих проблемах); может повторять вопросы, требуя необходимых уточнений {Мне нужно больше информации об этом. Не могли бы вы сказать еще что-нибудь по этому поводу? Что вы имеете в виду, когда говорите???); просит сменить тему, если она ей незнакома {Давайте сменим тему беседы.)] задает ироничные вопросы {Вы говорите «пет» только для того, чтобы проявить свой негативизм?). Таким образом она копирует речевое поведение психолога. Многие психолингвистические разработки по данной тематике связаны с проблемой распознавания речи и перевода ее, например, из устной в графическую, в том числе письменную форму. Применение подобных прикладных разработок психолингвистики имеет большие перспективы для создания интерактивных систем взаимодействия человека и машины (для создания электронных секретарей, компьютерных переводчиков, компьютерных лингвистов-диагностов и т. д.)^[3].

• [1] Петренко В. Ф. Основы психоссмантики. Смоленск, 1997.
• [2] Компьютерная лингвистика // Повое в зарубежной лингвистике. Вып. XXIV. М., 1989;Белянин В. П. Основы психолингвистической диагностики. М., 1999.
• [3] Более подробно познавательный материал по данной проблеме см. в работах А. А. Леонтьева (2003), Р. М. Фрумкиной (2001), В. П. Белянина (2004 и др.).