Монтаж без таймлайна: как мы научили алгоритм собирать ролик из сырой записи с телефона
Привет, Хабр. Мы делаем Reels Boss — сервис, который раньше умел одно: резать длинные записи на короткие вертикальные клипы. Недавно мы выкатили в бету вторую большую штуку, Автомонтаж. На вход — вертикальное видео до трёх минут, где человек говорит в камеру. На выход — смонтированный ролик: без пауз и запинок, с субтитрами, акцентами, картинками к словам, наездами камеры, переходами и музыкой. Пользователь при этом не открывает таймлайн ни разу: выбрал один из 48 стилей, нажал кнопку, всё остальное ложится само. Снаружи это выглядит как «ИИ сделал красиво». Внутри это довольно приземлённая инженерная задача, в которой нейросетей меньше, чем кажется, а правил и компромиссов больше. Расскажу, как это устроено, где мы ошибались и что до сих пор работает хуже, чем хотелось бы. Читать далее