TF-IDF
TF-IDF (Term Frequency-Inverse Document Frequency) – это метрика, используемая при анализе текстов, чтобы определить важность слова в документе или коллекции документов.
YATI
YATI (Yet Another Transformer with Improvements – “Еще один трансформер с улучшениями”) – алгоритм, который Яндекс представил в 2021 году для улучшения качества поиска.
Анализ текста
Анализ текста – это техника машинного обучения, используемая для автоматического извлечения ценной информации из неструктурированных текстовых данных.
Би-энкодер
Би-энкодер (англ. bi-encoder, также dual-encoder) — архитектура нейронной сети для преобразования текстовых входов в плотные векторные представления (эмбеддинги) фиксированной размерности. В отличие от кросс-энкодеров, би-энкодер обрабатывает каждый входной текст независимо, что позволяет предварительно вычислять и сохранять эмбеддинги для массового поиска и сравнения.
Векторная кластеризация
Векторная кластеризация в SEO — это метод автоматической группировки поисковых запросов и страниц сайта на основе их семантической близости в многомерном векторном пространстве, где вместо совпадения ключевых слов анализируется математическое расстояние между смысловыми эмбеддингами.
Извлечение ключевых слов
Извлечение ключевых слов – это автоматизированный процесс определения наиболее важных слов или фраз (ключевых слов), которые наилучшим образом описывают тему или основную идею текста.
Кластеризация
Кластеризация в SEO — группировка страниц сайта на основе анализа семантической близости ключевых слов. Процесс подразумевает разделение всех ключевых слов, релевантных сайту, на группы, связанные общей темой или интентом пользователя.
Конкорданс
Конкорданс в лингвистике – это инструмент, представляющий собой список всех вхождений слова или фразы в тексте или корпусе текстов, наряду с их контекстом. Этот контекст обычно включает несколько слов или предложений до и после каждого вхождения.
Контекст
Контекст в NLP – это информация, окружающая слово, фразу или текст, которая помогает определить их значение
Контекстные векторы
Контекстные векторы являются важным инструментом в SEO (оптимизации поисковых систем). Они используются для анализа текста, определения его семантического контекста и соответствия пользовательскому намерению (интенту).
