Насмотрелся Я значит красивых видео в интернетах и решил, а чего бы и мне не попробовать...
Давно была мысль получить переходы между отрезками видео не как у всех (склейка, плавный переход с затемнением, осветлением, смешиванием и т.д. и т.п.) а уникальные.
Сразу оговорюсь, Я не профессионал и делаю видео о своих поездках для себя и друзей, с кем собственно путешествую, так сказать для домашнего просмотра.
Эксперимент проводился в двух нейросетях: KLING AI и RUNWAY, т.к. они это могут, а кроме того по видеообзорам, которые я смотрел, они показывали лучшие результаты.
Итак... Имеем последний кадр начального видеоотрезка
И первый кадр второго видеоотрезка
Задумка была такая - камера на первом кадре приближается к самолёту, влетает в салон и застывает у иллюминатора с видом на горы со второго кадра
Сказано - сделано...
Нейросеть KLING AI
Сначала не разобрался куда жмакать, но руки чесались и нейросеть создала видео НА ОСНОВЕ двух картинок.
Промт: «камера влетает в салон самолета и через иллюминатор видно горы»
Не то, что мне было нужно, но в общем и целом впечатляющий результат.
Ладно, делаем новый промт (уже используя вкладку сайта, с указанием первого и последнего кадра).
Промт: «на первом кадре камера приближается к самолету, влетает через иллюминатор в салон самолета, пролетает через салон и остановившись у противоположного иллюминатора будет видно горы с последнего кадра»
Хотя ИИ не понял куда надо двигать камеру, этот вариант уже близок к моей задумке и в принципе его уже можно оставить как рабочий вариант.
Я попробовал доработать промт: «на первом кадре камера двигаясь вперед приближается к самолету, который виден на кадре, влетает в этот самолет через иллюминатор в салон самолета, пролетает через салон и остановившись у противоположного иллюминатора будет видно горы с последнего кадра».
Тадаааам...
Третье видео странное от слова СОВСЕМ... ))) какие-то колеса появляются и турбина почему-то поперек...
Совсем забыл сказать, что до этого никогда не работал с ИИ и запросы создавал исходя из личных соображений.
Огорчило что каждый запрос, вне зависимости от получаемого результата, стоит денег, правда
при первой регистрации даётся несколько токенов, так сказать для пробы пера, которыми я и воспользовался, но хватит на 5-6 раз...
Ладно, намотал сопли на кулак и пошел экспериментировать со второй нейросетью
RUNWAY
Промт: "камера влетает в салон самолета и через иллюминатор видно горы"
Абсолютно понятно, что ИИ не справился с задачей.
Ну может ИИ не понимает Русского языка? ОК. Я не знаю английского, но зачем же нам ещё нужен гугл-переводчик: "the camera flies into the cabin of the plane and through the window you can see the mountains". Погнали...
Нет... Стало только хуже... А может перевод не точен (тут знатоки английского видимо накидают мне в шапку).
Подводя итоги хочу сказать, что для домашнего пользования эта затея дороговата и не факт, что удастся реализовать свой замысел на 100%
Также на генерацию видео уходит примерно час времени, что не позволяет оперативно работать над исправлением промта.
Лично Я возможно вернусь к этой затее когда генерация будет точнее, быстрее и дешевле.
Что касается профессионалов, надеюсь они сами прокомментируют возможность использования ИИ как генератора переходов и дадут свои рекомендации...