С.В. Рубаков

Смысловой анализ текстов

На данный момент существует множество подходов к анализу текстов. В основу любого текстового анализатора обычно бывает заложен некий инструмент, позволяющий делать всевозможные лингвистические анализы – такие как семантический анализ, морфологический анализ, орфографический анализ и другие. Основной проблемой такого рода анализаторов является то, что ни один из лингвистических анализов не учитывает реального смысла текста, а лишь по косвенным признакам может выполнять какие-либо действия. В данной работе сделана попытка уйти от существующей концепции – что все языковые проблемы могут быть решены исключительно с помощью лингвистики – и взглянуть на проблему анализа текстов с несколько иной стороны. Предлагается способ анализа текста с использованием смысловой компоненты. Рассматривается подход с использованием общеупотребительной лексики, причем этот подход без ограничения общности легко переносится на любую специализированную область знания. Приводятся результаты экспериментов, поясняющих этот метод и следствия из него.