BM25
BM25 (Best Matching 25) – это алгоритм оценки и ранжирования релевантности документов в поисковых системах. Он был разработан Джо Баярдом и Трэвисом Хьюзом в 1994 году для улучшения алгоритма BM11.
GenAI
GenAI, или генеративный искусственный интеллект, – это подмножество технологий искусственного интеллекта, которые могут генерировать новые результаты на основе данных, использованных для обучения модели.
Gensim
Gensim – это библиотека для анализа текстов и моделирования тем на языке программирования Python. Основная цель Gensim – работа с большими корпусами текста и разработка простых и эффективных алгоритмов для обработки и моделирования текстовых данных.
GPT
GPT – это нейронная языковая модель, которая может быть настроена на выполнение конкретной задачи путем применения к входному сигналу трансформаций, зависящих от задачи, что требует минимальных изменений в архитектуре модели.
IRI
IRI – стандарт интернет-протокола , который основан на протоколе унифицированного идентификатора ресурса (URI) и значительно расширяет набор разрешенных символов благодаря использованию не US-ASCII, а большинство символов из универсального набора символов (Unicode/ISO 10646 ), включая китайские, японские, корейские и кириллические символы.
LDA
LDA (Latent Dirichlet Allocation) – это один из наиболее популярных алгоритмов тематического моделирования, широко используемый в задачах информационного поиска и анализа текстов.
LSA
LSA (Latent Semantic Analysis) – это метод обработки и анализа текстовых данных, который помогает выявить скрытые семантические связи между словами. Иными словами, LSA – это способ понять, какие слова в тексте связаны между собой по смыслу.
n-грамма
N-грамма – это последовательность из N слов в тексте. N может быть любым числом, и означает количество слов, которые объединяются вместе.
NER
NER (Распознавание именованных ceoyjcntq) — это метод обработки естественного языка (NLP), который извлекает информацию из текста. NER включает в себя обнаружение и классификацию важной информации в тексте, известной как именованные сущности.
