Оценку видеоAPI Runway следует рассматривать как решение о продукте, а не как разовый тест запроса. Определите тип сцены, исходный материал, формат вывода, допустимую задержку и критерии проверки, важные для вашего приложения. Используйте один и тот же компактный набор тестов при каждом сравнении вариантов.
Перед разработкой проверьте актуальный каталог моделей OdiRouter. Каталог надёжнее предположения о том, что названная модель представлена в списке, принимает те же входные данные или сохраняет те же коммерческие условия. Прежде чем делать модель зависимостью в production, изучите её страницу, задокументированный тип задачи и актуальную цену.
Сначала определите задачу для видео
Запишите задачу до сравнения моделей. Клип для соцсетей, созданный из текста, изображение продукта, анимированное по референсному изображению, и задача по улучшению материала на этапе постобработки могут требовать разных входных данных и разных проверок качества. Полезное техническое задание фиксирует:
входные данные, которые вы будете отправлять, например текст, изображение или референсный материал;
предполагаемый формат и продолжительность вывода;
критерии качества, которые рецензент может оценивать последовательно, например соответствие промпту, визуальная стабильность или пригодность для продукта;
Время отклика и бюджет, которые может принять приложение.
Сохраняйте фиксированный набор оценочных данных. Включите в задание обычные вопросы, один сложный вопрос и справочные материалы, которые, как вы ожидаете, будут полезны. Сохраняйте настройки запроса вместе с заметками рецензента. Эта запись остается полезной при изменении модели или ценообразования.
Проверьте доступность и контракт модели
Каталоги моделей меняются. Перед интеграцией рабочего процесса Runway API для видео или альтернативного варианта изучите актуальную запись в каталоге видео OdiRouter. Подтвердите ID модели, которую планируете запрашивать, поддерживаемый тип входных данных, получаемый результат и любые ограничения на актуальной странице.
Не считайте знакомое название модели неизменным интерфейсом. Доступная версия, поведение очереди, контракт входных данных или цена могут измениться. Храните эти параметры в конфигурации и проверяйте актуальную документацию при изменении маршрута.
Сравнивайте стоимость, скорость и качество на одном наборе тестов
Цена имеет значение только в связи с результатом, который необходим продукту. Используйте OdiRouter Pricing, чтобы проверить актуальные цены на модели перед тестированием. На официальной странице также описаны конфигурации тестирования с кредитами, что позволяет провести небольшую контролируемую оценку перед увеличением объёма.
Для каждого рассматриваемого маршрута храните вместе актуальную ссылку на цену, настройки запроса, время до получения пригодного результата и оценку проверяющего. Один тщательно подготовленный запрос не доказывает, что маршрут подходит для каждой задачи. Более полезен короткий набор репрезентативных задач.
Отделить работу по интеграции от выбора модели.
После того как маршрут пройдет оценку, займитесь деталями интеграции. Используйте Getting Started documentation для API-ключей, авторизации, ID моделей, первых запросов и настройки SDK. Используйте актуальную документацию при настройке переменных окружения, выборе ID модели и проектировании обработки ошибок.
Ограничивайте сферу применения приложения узкими рамками. Пусть конфигурация задаёт ID модели и настройки запроса. Регистрируйте идентификаторы запроса и выходных данных, необходимые для службы поддержки, а затем направляйте запросы на повторную попытку или проверку в соответствии с удобством использования для пользователя. Последующее сравнение моделей будет менее затруднительным.
Контрольный список перед запуском
Перед выпуском маршрута генерации видео ответьте на следующие вопросы:
Доступен ли кандидат в текущем видеокаталоге OdiRouter?
Соответствует ли его документированный контракт входных и выходных данных задаче продукта?
Оценила ли команда репрезентативный набор для оценки по тем же критериям?
Проверили ли вы актуальную цену и конфигурацию тестирования на странице цен?
Использует ли интеграция актуальный ID модели и рекомендации по настройке из документации?
Каталог моделей OdiRouter, Pricing и Getting Started documentation содержат информацию, необходимую для этих проверок. Проверяйте их перед существенным изменением маршрута, вместо того чтобы полагаться на старое сравнение или анонс третьей стороны.