ПЫРЯЕВ·@anatolypyryaev
Почта Telegram

Частотный словарь поэзии Майи Никулиной

Частотный анализ стихов: слова от самых частых к самым редким, части речи, формы с падежами и родом, связи слов между собой, граф зависимостей, разнообразие словаря и облако слов.

№ Слово Часть речи Раз По книгам

Частотный анализ стихов Майи Никулиной

Инструмент показывает, из каких слов состоит поэзия Никулиной Майи Петровны и как часто каждое из них встречается. Список идёт от самых частых слов к самым редким — это и есть частотный словарь текста. Материал — книги, добавленные в корпус; их перечень с годами издания открыт в фильтре слева.

Слова приводятся к начальной форме: «землю», «земле» и «землёй» — это одно слово «земля». Такой разбор называется лемматизацией, и он отличает инструмент от простых счётчиков частоты, которые считают каждую словоформу отдельно и дробят одно слово на несколько строк. Для каждой формы при этом сохраняется грамматика — падеж, число, род, время, лицо, — поэтому видно не только сколько раз встретилось слово, но и в каком виде.

Кроме частотности инструмент разбирает слова по частям речи. Это заметно меняет картину: предлоги, союзы и частицы занимают верх списка только за счёт служебной роли, а стоит их скрыть — и на первый план выходит то, о чём стихи на самом деле.

Вкладка «Связи слов» показывает синтаксический разбор: какое слово к какому относится и как именно. Например, «белый» определяет «свет», а «трава» — подлежащее при «расти». По клику на строку видно, в каких стихотворениях эта связь встретилась, и нарисован разбор этих предложений. Разбор автоматический, и на стихах он иногда ошибается, поэтому связи стоит читать как подсказку, а не как факт.

Вкладка «Граф зависимостей» показывает то же самое картинкой: выбранное слово стоит в центре, а от него лучами расходятся все связанные с ним слова, и на каждом луче подписан тип связи — определение, предлог, подлежащее. Направление показывает стрелка, а клик по любому слову переносит центр на него: так по связям можно ходить и смотреть, куда они ведут. Картинку можно поворачивать ползунком и таскать мышью, если она не помещается на экран; линии в легенде включаются и выключаются кликом.

Вкладка «Разнообразие словаря» отвечает на вопрос, насколько богат словарь книги. Привычная мера — сколько разных слов приходится на все остальные — зависит от длины текста: чем длиннее книга, тем ниже число, и по ней короткая книга всегда выглядит богаче длинной. На вкладке сравниваются меры, от длины не зависящие, те же меры пересчитываются при одинаковом объёме книг, и нарисована кривая роста словаря.

Материал инструмента — стихи Никулиной Майи Петровны. Частотность, формы и связи посчитаны заранее, поэтому вкладки открываются сразу: фильтры и переключатели только показывают уже готовые числа.

Как пользоваться

  1. Выберите книги — кнопки в разделе «Книги». Книгу можно снять и смотреть частотность только по оставшимся.
  2. Сузьте отбор до отдельных стихотворений — отметьте нужные в списке, и все числа пересчитаются только по ним.
  3. Отфильтруйте части речи — галочками в разделе «Части речи». Или включите переключатели «Скрыть местоимения» и «Скрыть служебные слова», чтобы убрать предлоги, союзы и частицы.
  4. Посмотрите формы слова — клик по строке раскрывает все формы с падежом, числом и родом.
  5. Объедините лемму — переключатель собирает слова с одной леммой, но разными частями речи, в одну строку: «быть — глаг. 26 / инф. 3».
  6. Сравните с облаком слов — вкладка «Облако слов» показывает тот же отбор, но размером слова вместо числа, а цветом — часть речи. Раскладок три, включая вариант с вертикальными словами.
  7. Посмотрите связи слов — вкладка «Связи слов» показывает, какие слова связаны между собой: «белый ← свет», «трава ← расти». Фильтруйте по типу связи и частоте, а по клику на строку увидите, где эта связь встретилась, и разбор предложения.
  8. Посмотрите связи слова картинкой — вкладка «Граф зависимостей» ставит выбранное слово в центр и разводит от него лучами все связанные с ним слова, подписывая на каждом луче тип связи. Направление показывает стрелка: коричневая — слово зависит от соседа, синяя — сосед зависит от слова. Клик по слову переносит центр на него, «← назад» возвращает. Ползунок «Поворот» разворачивает картинку, чтобы разгрузить тесный участок, а мышью её можно таскать.
  9. Сравните богатство словаря — вкладка «Разнообразие словаря» показывает, насколько богат словарь каждой книги. Меры там выбраны так, чтобы не зависеть от длины текста, а для книг разного объёма есть дополнительный пересчёт на одинаковый объём.
  10. Найдите нужное — поиск ищет и по начальной форме, и по всем формам слова, сортировка переключается на алфавит, а порог частоты убирает редкие слова.
  11. Откройте стихотворение — вкладка «Стихотворения» показывает названия по алфавиту; клик по строке открывает это стихотворение в таблице.
  12. Сошлитесь на отбор — выбранные книги, стихотворения, части речи и открытая вкладка записываются в адрес страницы. Скопировав ссылку из адресной строки, можно вернуться к тому же виду или отправить её кому-то ещё.

Чем это отличается от счётчиков частоты слов

Онлайн-счётчики частоты обычно считают словоформы: «земля», «земли» и «землёй» попадут у них в три разные строки. Здесь текст разбирается морфологическим словарём русского языка, поэтому формы одного слова собираются вместе, а у каждой формы есть грамматика. Кроме того, инструмент работает не с одним текстом, а с целым корпусом: видно, как слово распределено по книгам и по отдельным стихотворениям.

Вопросы

Что такое частотный анализ текста? Это подсчёт того, сколько раз каждое слово встречается в тексте. Полученный список называют частотным словарём; по нему видно, какие темы, образы и слова в тексте главные.

Чем лемма отличается от словоформы? Словоформа — это слово в конкретном виде («землёй»), а лемма — его начальная форма («земля»). Частотный словарь по леммам точнее отражает смысл, потому что не дробит одно слово на десяток строк.

Что такое облако слов? Тот же частотный список, только размер слова означает частоту: чем крупнее слово, тем чаще оно встречается в стихах.

Что показывают связи слов? Это синтаксический разбор: какое слово к какому относится в предложении и как именно — определение, подлежащее, дополнение. Он показывает не то, из каких слов состоит текст, а как эти слова соединяются друг с другом.

Что значит «богатство словаря»? То, насколько редко слова повторяются: чем больше разных слов приходится на текст, тем богаче словарь. Сравнивать книги по этой мере можно только с поправкой на длину текста.

Насколько можно доверять числам? Частотность и формы слов определяются надёжно, а синтаксический разбор автоматический и на стихах иногда ошибается — связи стоит читать как подсказку. Частые связи обычно верны, единичные могут оказаться случайными.

Условия использования

Инструментом можно пользоваться свободно: смотреть, давать на него ссылку, приводить посчитанные показатели в статьях и работах — со ссылкой на источник.

Стихи принадлежат их автору, Никулиной Майе Петровне. Разбор текстов, разработка и оформление страницы сделаны Анатолием Пыряевым для anatolypyryaev.ru.

Обратная связь

Нашли ошибку в разборе, заметили неточность в подсчётах, есть вопрос или пожелание — пишите на почту pyryaev.anatoly@yandex.ru или в Telegram, MAX, ВК. И подписывайтесь на мои каналы.

История обновлений