Лингвостатистический метод

Для современного лингвистического исследования актуальным остается философское положение о том, что предмет, не отраженный в аспекте количества, не может считаться конкретно познанным и что наука вообще достигает совершенства лишь там и в той мере, в какой ей удается взять на вооружение математику. Категория количества в языке связана с установлением количественных изменений, вызывающих качественные преобразования языковых явлений. Именно действие в языке закона перехода количественных изменений в качественные служит важнейшим условием выявления в нем его закономерностей. В связи с этим основной задачей количественного метода в языкознании является раскрытие закономерностей функционирования единиц языка и речи, а также установление закономерностей построения текста. Теоретическое обоснование этого метода и создание алгоритмов его практического применения в языкознании – предмет особой отрасли науки о языке, получившей название лингвостатистики.

Возможность применения лингвостатистического метода обусловлена природой и сущностью языка.

Язык как система представляет собой совокупность взаимосвязанных дискретных (членимых) единиц, обладающих количественными характеристиками. Этот фактор в скрытом виде признается всеми языковедами, традиционно использующими такие количественные понятия, как «часто», «редко», «многочисленные», «наиболее употребительные», «редко употребляемые» и т.п.

Количественные характеристики языковых единиц (и их элементов) одного уровня формируют качественное своеобразие единиц другого уровня. Так, язык с десятью фонемами образует иное количество звуковых «оболочек» морфем и слов, чем язык с пятьюдесятью фонемами.

Язык имеет вероятностный характер. Так, для образования слов используется незначительная часть возможных комбинаций фонем и морфем. В этом выражается действие вероятностных ограничений в сочетании фонем и морфем. Речь – это область реализации языковой системы. Применение к ее исследованию лингвостатистического метода предопределяется:

· множественностью языковых единиц;

· их повторяемостью в речи;

· избирательностью языковых единиц (элементов) из ряда однородных (возможностью выбора соответствующей замыслу высказывания единицы).

Итак, лингвостатистический метод применим для изучения как языка, так и речи. Однако следует помнить, что количественные характеристики в системе языка не тождественны их количественным отношениям в речи. Дело в том, что на речь влияют не только законы языка (и, прежде всего, закономерности строения языковых единиц, закономерности их речевой реализации), но и законы сочетаемости языковых единиц в речи, законы жанра, тема высказывания, идиостилистические особенности речи и т.п.

Количественные характеристики словарного состава в разных стилевых и авторских разновидностях речи в настоящее время широко используются в лексикологии и стилистике. Количественное описание подъязыков науки и техники используется для автоматической обработки языковой информации (создания информационно-поисковых систем и программ для машинного реферирования текстов), а также в методике преподавания языков.

Шире всего количественные методики используются при описании лексического уровня языковой системы. Лингвисты убеждены, что лексемный ярус системен, но его системность особого рода. В лексике целостность и устойчивость системы сочетается с автономностью частей (подсистем). В ней заметна массовость и случайность и одновременно господствует необходимость. Всё это характерно для вероятностных систем.

Практическим результатом статистического изучения лексики являются частотные словари, отличающиеся от обычных лингвистических (толковых, орфографических и др.) тем, что словарные единицы располагаются в них не только в алфавитном порядке, но и в порядке убывающей частотности. В первом случае это будет алфавитный частотный словарь, а во втором – ранговый частотный словарь. Частотные словари характеризуются следующими параметрами: объём текста (число словоупотреблений), объём словаря словоформ, объём словаря лексем.

Математические методы в лингвистике обладают следующими возможностями:

– делают точные суждения, основанные на количественно частотных суждениях;

– указывают на такие обстоятельства функционирования языка или диалекта, которые иными способами не обнаруживаются;

– позволяют глубже понять причины и результаты языковой эволюции, длительность эволюционных процессов и их хронологию, и даже прогнозировать будущее языковое развитие;

– расширяют сферу прикладного использования (Н.Д. Русинов, 1983, с. 42).

Количественная методика стала более эффективной с появлением вычислительной техники.

Определение авторства текстов с помощью формально-количест­венных и статистических методов стимулировало поиск и выявление характерных структур авторского языка.

Д.В. Хмелев предложил методику определения авторства, основанную на том, что по произведениям автора, которые достоверно им созданы, вычисляется матрица переходных частот употреблений пар букв. Затем такие матрицы строятся для каждого из авторов, «подозреваемых» в написании анонимного текста, и для каждого автора оценивается вероятность того, что именно он написал анонимный фрагмент текста. В результате автором анонимного текста полагается тот, у которого вычисленная оценка вероятности больше (А.Т. Хроленко, В.Д. Бондалетов, 2006, с. 473).

В Эдинбурге (Англия) разработан аналитический метод, основывающийся на учёте зависимости частоты употребляемого слова и длины предложения, в котором оно появляется. Этот метод получил название «диаграммы накапливающихся сумм». С его помощью установлено, что каждому человеку свойственен прочно укоренившийся, неизменный стиль, который не поддаётся имитации. Например, стиль Т. Харди в «Руке Этельберты» (1876) убедительно совпадает со стилем «Джуда Неизвестного». Анализ показал, что авторы приобретают и сохраняют постоянный стиль, как бы не сложилась их жизнь.

Специалисты говорят о безусловной целесообразности статистических исчислений по любой лингвистической теме. Реальная перспектива – глобальная информатизация языкознания – от сбора данных до выхода научных трудов из печати.

Использование количественных методик в языкознании не означает, что наука о языке стала одной из математических дисциплин. Устойчиво мнение о том, что язык как целое не является подходящим объектом для эффективной математической обработки. Как заметил А.Ф. Лосев, в языке нет никакой однородности и никакого постоянства. Родительных падежей столько же, сколько и тех контекстов, в которых они встречаются (А.Ф. Лосев, 1983, с. 54).

Сущностные характеристики языка могут быть исследованы только с помощью целого ряда методик и методов, среди которых своё место занимают и количественные методики. Они являются хорошим вспомогательным средством для глубокого проникновения в суть дела. Лингвистика остаётся единой наукой, сочетающей качественные и количественные методики для более адекватного описания системы языка и характеристики его стилей (А.Т. Хроленко, В.Д. Бондалетов, 2006, с. 475–476).

Дата добавления: 2014-10-17