Google добавила функцию пакетной обработки в Vertex AI для разработчиков
Google расширила Vertex AI пакетной обработкой, позволяющей отправлять тысячи примеров для одновременного анализа. Система автоматически распределяет нагрузку между вычислительными узлами и оптимизирует затраты за счёт снижения стоимости за запрос при массовой обработке.
Разработчики могут задавать расписание для повторяющихся задач пакетной обработки через простой интерфейс. Функция поддерживает различные форматы данных: CSV, JSONL, Parquet с предварительной валидацией схемы.
Интеграция с хранилищами
Пакетная обработка интегрирована с Google Cloud Storage, BigQuery и других сервисов данных платформы. Результаты автоматически сохраняются в указанное хранилище с возможностью фильтрации и сортировки.
Мониторинг процесса обработки осуществляется через dashboard с метриками прогресса, оценкой времени завершения и уведомлениями об ошибках. API поддерживает управление приоритетом задач.
Цена за пакетную обработку на 40 процентов ниже обычных API-запросов, что делает функцию привлекательной для аналитических рабочих нагрузок и тестирования моделей.