5.2. Слова в словаре и слова в тексте

Одна из общих закономерностей словарного состава любого текста состоит в том, что некоторые слова в нем непременно часто повторяются. Что это за слова? В языках, где есть артикли, это, конечно, именно они. Но кроме артиклей часто повторяются предлоги, частицы, местоимения и союзы. В любом языке (мы оставляем вне рассмотрения языки с иероглифической письменностью) есть эквиваленты смыслов, выражаемых русскими И, Я, ОН, БЕЗ, НЕ, В, С, ЭТОТ, ТАМ и им подобными словами.

Первыми на это обратили внимание изобретатели скорописи, которая потом превратилась в стенографию. Стенографическая запись речи, не исчезнувшая и в эпоху магнитофона, основана именно на том, что чем чаще (в среднем) какое-либо слово встречается в тексте, тем упрощеннее значок, с помощью которого это слово фиксируется на письме. Чтобы разумно обосновать стенографические системы, специалисты по стенографии еще в конце XIX в. начали составлять так называемые частотные словари. Известен, например, немецкий словарь Ф. Кединга 1898 г., основанный на подсчетах по текстам общим объемом около 11 млн слов. Кединг включил сюда и парламентские дебаты, и тексты художественной литературы.

Со временем аналогичная задача для усовершенствования телефонии была поставлена известной телефонной компанией «Белл» – в ее лабораториях в 1930 г. был составлен первый частотный словарь устной речи. Частотные словари – это всегда списки слов, основанные на подсчетах по большим и представительным массивам текстов.

Еще в начале прошлого века необходимость облегчить изучение чужого языка была осознана как социально важная проблема. Естественно, что это случилось ранее всего там, где огромную массу населения составляли иммигранты, т. е. в США. Первым такой словарь в 1911 г. издал Р. Элдридж – это был список из 6 тыс. «общеупотребительных» английских слов, составленный им на базе обследования четырех американских газет. Позже аналогичных словарей вышло много.

Частотный словарь, как правило, представляет собой список слов, упорядоченных от частых слов к редким. Если мы проанализируем, что это за слова, то увидим достаточно любопытную закономерность. Первые 50 самых частых слов в любом частотном словаре – это слова неполнозначные.