Сравнение текстов по леммам INTELSIB:ПО ЛК

Принцип работы заключается в следующем: анализируемый текст разделяется на фрагменты, после чего инструмент преобразует все словоформы в леммы, а потом уже идёт сравнение этих самых фрагментов текста.

Также этот инструмент можно применять для поиска необходимых для добавления в текст словоформ относительно группы конкурентов. При добавлении сразу нескольких урлов с новой строки в облать “текст 2” можно получить все пересечения указанных текстов. Тем самым найти важные для текстового ранжирования леммы и биграммы.

Настройка работы инструмента

Стартовый экран представлен двумя блоками, куда можно вводить необходимые для анализа текста. Формат ввода текстов может быть как обычный текст, тогда галочки “содержит ссылки” необходимо снимать, чтобы анализатор прорабатывал как текстовый материал, так и ввод урлов (ссылок) или код страницы. При работе со ссылками инструмент выгружает код страницы, определяет html разметку и проводит подсчет лемм в тексте.

Первый блок предназначен для текста, который надо сравнить, второй блок, может содержать множественные значения для того, с чем сравнивать.

При нажатии на кнопку “отправить” будет запущен процесс подсчета лемм для всех указанных урлов.

Результат работы инструмента “Сравнение текстов по леммам”.

После выполнения будет представлена информация по ссылками (текстам), которые анализировались, причем для основного текста, который проверяем, в приоритете берется сохраненная версия страницы в Яндексе. Необходимо для более точного анализа текстового ранжирования при использовании результатов данного инструмента, т.к. ранжирование документа было проведено именно по тексту в сохраненной копии.

Блок статистики анализа

Это блок представляет численные значения по количеству слов в тексте, количеству лемм, количеству лемм без прерываний текста, и количеству слов без прерываний.

Итоговые значения рассчитаны по каждому добавленному урлу и представлены в табличном виде для сравнения.

Блок “Результаты анализа”

Ключевой блок данного инструмента это представление всех подсчитанных лемм для заданных текстов.

В первой части выводятся все леммы, которые определены для текстов (анализируемого и контрольной группы). Для столбцов применена сортировка от большего количества лемм к меньшему для наглядности.

Вторая часть блока представлена в виде:

Разность - выводит список лемм, которые есть во втором тексте и нет в первом;
Объединение - список всех лемм первого текста и второго;
Пересечение - список лемм, которые есть в первом и во втором текстах.

Данные поля помогут определить каких лемм недостаточно в тексте, определить переспам лемм.