Изображение в запросе стало обычной частью работы с ассистентом
Разбор изображений перестал быть отдельной функцией и растворился в обычном диалоге. Пользователь кидает скриншот ошибки, фотографию таблицы или схему и спрашивает по ней так же, как спрашивал бы по тексту.
Это изменило форму запроса. Вместо описания ситуации словами человек показывает её и добавляет короткое уточнение — сформулировать текстом то, что видно на снимке, оказывается дольше и менее точно.
Где модель ошибается предсказуемо
Устойчивые слабые места известны: мелкий текст на фотографии, плотные таблицы с объединёнными ячейками и схемы, где смысл задаётся направлением стрелок. Модель уверенно называет, что изображено, и заметно хуже читает отношения между элементами.
Отсюда рабочий приём — не просить «разобрать картинку», а задавать конкретный вопрос по конкретной области, при необходимости обрезав изображение. Узкий кадр снимает большую часть ошибок распознавания структуры.
Что это значит
Подробности и первичное описание опубликованы на странице разбор приоритетов внутри запроса, там же собраны условия доступа и ограничения, о которых заявили разработчики.
Похожие материалы и обновления по теме мы собираем в разделе Рынок ИИ и корпоративные новости — он пополняется по мере выхода новых сообщений.