Для конкретной задачи специализированная система работает лучше большой модели

Раньше логика была: возьми большую модель, дообучи на своих данных, получишь специалиста. Теперь логика другая: возьми маленькую модель, дообучи сильнее, плюс построй вокруг неё слой логики, специфичный для твоей задачи.

Результат: специализированная система работает точнее, быстрее и дешевле. Минус: она не работает на других задачах. Но если тебе нужна одна задача, это не минус.

Система вместо модели

Старое мышление: модель должна быть универсальной. Новое: модель должна быть узкой, зато система вокруг неё решает всё остальное.

Компании, которые так делают, выигрывают в качестве ответов и точности. Те, кто всё хочет сделать одной большой универсальной моделью, отстают в результатах и тратят больше.

Архитектурный выбор простой: лучше иметь пять моделей каждая на пять процентов точнее, чем одну огромную модель со средним качеством.