Google запустила инструмент для автоматической оптимизации промптов по метрикам
Google представила инструмент для автоматической оптимизации промптов, который использует метрики качества для поиска улучшений. Система анализирует выходные данные модели на наборе тестовых примеров и предлагает изменения формулировок, структуры и логики запроса.
Оптимизатор работает в интерактивном режиме и показывает метрики качества после каждого изменения. Разработчик может выбирать, какие метрики учитывать — точность классификации, релевантность поиска, объём галлюцинаций или среднее время ответа.
Интеграция в разработку
Инструмент встроен в Google AI Studio и доступен также через API с поддержкой локального запуска. Он совместим с моделями Gemini и может быть адаптирован под специализированные корпоративные модели.
Google предоставляет библиотеку примеров оптимизированных промптов для типичных задач — классификации текста, извлечения информации, суммаризации. Разработчики могут использовать их как основу для собственных промптов.
Сервис открыт для бета-тестирования и доступен на условиях бесплатного плана с ограничением в сто запросов в день.