История этой ИИ модели началась примерно 1,5 года назад. Тогда, в нейросети Stable Diffusion, на основе живой фотографии леса в закате, сочетания цвета и света, мне удалось создать изображение этой молодой женщины, фотографического качества. Нейросети стремительно развиваются. Вот настал момент, когда уже можно во вполне приемлемом качестве, ЛОКАЛЬНО, мастерить собственное видео в режиме I2V.
В открытом, бесплатном доступе, вышел великолепный инструмент под названием Framepack.
Не сильно требовательный к ресурсам ПК. В процессе работы, обратил внимание, что основной упор идёт на накопитель, ОЗУ и видеокарту. Мне вполне хватило обычного жесткого диска, 64Гб ОЗУ и RTX3090. Но лучше SSD m.2, 128Гб ОЗУ и RTX последних серий. Генерация происходит в 2 этапа. Первый, работает "Encoder" - вся нагрузка на накопитель (100%). Второй "Sampling" - вся нагрузка на ОЗУ и видеокарту. Эта нейросеть довольно хорошо следует командам. Порядка 70% процентов команд исполнила в точности. Конечно есть проблемы с качеством изображения, но всё впереди, я думаю.
Одно из направлений, к чему идёт всё происходящее по части видеогенерации - будут появляться нейро актёры и актрисы. Будут нейро художественные фильмы и сериалы. Своя актриса у меня уже есть - Иветта Болсер (Yvette Bolser).
Если переложить это на коммерческую составляющую, представляете, насколько это экономически целесообразно! Подумайте сами, каких требует ресурсов провести живую съемку - найти красотку, выезд в локацию, съемки, время, финансы...
Конечно путей может быть огромное множество. В частности, можно провести настоящую съемку, а благодаря AI инструментам получить более сложные, гибридные, если можно так выразиться, шедевры.