⚠️ AI/LLM — быстро меняющаяся область; ссылки и модели устаревают. Сверяйтесь с актуальной документацией.
Первоисточники и статьи
- Attention Is All You Need (Vaswani et al., 2017) — оригинальная статья о трансформерах
- The Illustrated Transformer — визуальный разбор
- Документация 🤗 Transformers
Термины и концепции
- RNN/LSTM, CNN для текста, word2vec — для понимания эволюции
- BERT и GPT — два семейства трансформеров (понимание vs генерация)