🔖 Справочник: глоссарий

← К оглавлению урока

⚡ Главные термины

  • NLP — обработка естественного языка
  • Attention — механизм внимания
  • Эмбеддинг — числовое представление слова
  • Токен — единица текста для модели

Глоссарий урока

ТерминЗначение
NLPNatural Language Processing — взаимодействие компьютера и человека на естественном языке
ELIZAОдна из первых диалоговых программ (1966), отвечала по шаблонам без понимания смысла
n-граммаПоследовательность из n слов; основа статистических языковых моделей
RNNРекуррентная нейросеть — обрабатывает последовательность по шагам, передавая «память»
Затухание градиентовПроблема RNN: на длинных текстах теряется влияние ранних слов
CNNСвёрточная нейросеть — выделяет локальные шаблоны (фразы)
ТрансформерАрхитектура (2017) с параллельной обработкой и вниманием — основа LLM
AttentionМеханизм внимания: фокус на важных словах, контекст на любом расстоянии
Позиционный эмбеддингМетка позиции слова (трансформер обрабатывает слова параллельно)
ЭмбеддингЧисловой вектор, кодирующий смысл слова/токена
BERTТрансформер для понимания/анализа текста
GPTТрансформер для генерации текста/кода/диалога
Тест ТьюрингаЕсли испытатель не отличает машину от человека в переписке — машина «прошла» тест
⚠️ В этом уроке кода ещё нет — устанавливать окружение и работать с API LLM начнём с урока 03. Термины здесь — фундамент для всего курса.