Как протестировать модели преобразования изображения в видео, не обманывая себя

Демонстрации видео AI легко сравнивать. Одной модели достаётся кинематографический портрет, другой — предметный снимок, а третьей — сложная боевая сцена. Победителем обычно становится модель, получившая самую легкую подсказку, а не модель, которая покажет лучшие результаты в производстве. Полезный тест преобразования изображения в видео должен контролировать входные данные, определять, что означает успех, и отделять быстрые ошибки от ошибок модели. В этом руководстве описан небольшой рабочий процесс оценки, который может запустить создатель или команда разработчиков без создания полноценной исследовательской лаборатории. Начните с контракта на выстрел Прежде чем выбрать модель, опишите снимок как компактный контракт. В контракте должны быть четко указаны необоротные требования. { "subject": "ведущий держит черную коробку с продуктом", "identity_lock": ["лицо", "волосы", "наряд", "логотип", "геометрия коробки"], "primary_motion": "ведущий поднимает коробку и поворачивает ее к камере", "вторичный_движение": "тонкое дыхание и движение ткани", "camera": "фиксированный средний план с медленным пятипроцентным продвижением", «длительность_секунд»: 8, "finish": "удерживайте предмет, обращенный вперед, до последней секунды" } Это не обязательно приглашение, отправленное модели. Это спецификация