Что значит transformer?

Где и как употребляется

Слово употребляют как существительное и определение: модель-трансформер, слои трансформера, система на основе трансформера. Различают модели только с энкодером, только с декодером и с энкодером-декодером. Их применяют также к изображениям и аудио.

Примеры предложений

1. We replaced the old recurrent model with a small transformer and cut errors by a third.

   Мы заменили старую рекуррентную модель небольшим трансформером и сократили число ошибок на треть.

   Новая архитектура улучшила качество относительно рекуррентной модели.

2. Most current LLMs are decoder-only transformers.

   Большинство современных LLM — трансформеры только с декодером.

   Уточняется тип архитектуры, использованный в языковых моделях.

Распространённые словосочетания

• transformer model
• transformer architecture
• decoder-only transformer
• transformer-based