Серия «Видео»

Художник Heather Cooper (ссылка ведет на Х, так что включите телепорт) сделал для нас хорошее дело - сравнил 10 топовых видеогенераторов:

• Google Veo

• Adobe Firefly Video

• Hunyuan Video

• Pika 2.1

• Wan-2.1

• Runway Gen-3

• Kling AI 1.6

• Luma Ray2

• Hailuo MiniMax

• Sora (в сравнительных гридах ее нет, но в полном видео показана)

Эксперимент был для Text-to-Video, без картинки в качестве референса. Для каждой модели автор использовал один и тот же промпт:

A person stands in a bright, airy room, bathed in soft natural light streaming through a large window adorned with sheer white curtains. As they gaze into a shimmering mirror, their hand, elegantly manicured with a deep crimson polish, lifts a glossy lip applicator towards their lips. Their outfit, a flowing pastel blouse paired with chic high-waisted trousers, exudes effortless style, complemented by delicate gold jewelry that sparkles subtly in the light

Далее он выбрал наиболее понравившиеся результаты, представленные на первом видео. Пока вы не начали фукать, задача стояла непростая и деликатная - накрасить губы, деликатней, чем макароны поесть)))

А чтоб окончательно отбить у вас желание разнести модели в пух и прах, вот вам видео для наглядности:

Еще в ноябре 2024 года все выглядело вот так. Ну что, первое видео уже не кажется таким кринжовым? А ведь всего 4 месяца прошло, представляете?

Вообще, автор подтвердил то, о чем все догадывались - нереально выбрать лишь одну модель для всех задач и ждать великолепных результатов во всем,они все хороши по-своему и для своих задач. Поэтому-то нейрокреаторы покупают подписки на несколько моделей, не только чтоб потестить, и поэтому многие предпочитают приобретать подписки на платформах, которые предоставляют доступ к разным моделям видеогенераторов. Например Krea , или Syntx - тут рублями можно оплатить.

Больше полезных, а главное проверенных сервисов для учебы, работы и бизнеса в моем Закрытом клубе. Там же мы учимся промптить, разбираемся в языковых моделях, помогаем друг другу с задачами. Смысл в том, что вы платите только один раз! Вам не нужно торопиться, пока подписка действует, вы можете учиться в своем темпе, и в любой момент задать вопрос в чате) А то всё быстро устаревает, а на постоянные обучения денег не напасешься, я это понимаю.

Так же вам может быть интересно:

• Как оплачивать иностранные сервисы

• А если вам не хочется заморачиваться, в боте Syntx -- это мини приложение в телеграм, есть все популярные модели в единой подписке, и их можно оплатить русской картой. - Процесс я показала на примере создания Нейрофотосессии со своим лицом

На Freepik появился Video Upscaler, который способен быстро увеличить разрешение видео до 4K. При создании этого инструмента была использована технология компании Topaz Labs, известной своими решениями для улучшения качества изображений и видео.

Что может Freepik Video Upscaler

• Преобразовать видео низкого разрешения в сверхчеткое 4K, сохраняя текстуры, цвета и четкость.

• Увеличить частоту кадров до 60 fps. За счет этого движения будут более плавные

• Улучшить детали и четкость. Восстанавливает потерянные детали в видео низкого качества, уменьшает шум и артефакты движения.

• Freepik AI Video Upscaler использует технологию масштабирования Topaz для достижения более качественных результатов. Инструмент прост в использовании и позволяет улучшить качество видео всего за несколько кликов.

• Поддерживает форматы MP4, MOV, AVI, WebM и MKV.

Недостаток Freepik Video Upscaler

Freepik AI Video Upscaler доступен только для пользователей Premium+ с подпиской от 5€/мес

Лучшие видео создаются из изображений референсов, научитесь создавать красивые и реалистичные изображения в Закрытом клубе Midjourney

Начнем с глобального - в Kling - 2.0 уже можно снимать экшн сцены со сложными и резкими движениями, причем действие будет не одно. Теперь движения более плавные, при динамичном движении текстуры не смазываются и не появляется артефактов. Сначала я расскажу, что изменилось в новом Kling, а затем, мой честный обзор и мое мнение, замечания по этому генератору видео.

Обновление Kling 2.0:

• Редактор Multi-Elements для создания видео, который позволяет гибко добавлять/менять/удалять что-то в видео на основе текстовой подсказки или загрузки изображения

• Улучшено понимание промпта  - теперь поддерживаются более сложные подсказки с несколькими последовательными действиями. То есть персонаж полноценно удивится, затем разозлится, встанет, категорично махнет рукой и отвернется - и все это за один промпт.  

• Кинематографичность - теперь мимика персонажей более драматичная, картинка более детализированная

Так же обновился и встроенный генератор изображений KOLORS 2.0:

• Теперь доступно редактирование изображений, которое позволяет легко дорисовывать и расширять исходное изображение

• Рестайл - Добавлена функция изменения стиля в генерацию изображений, чтобы легко изменить стиль с помощью простой подсказки. Поддерживает более 60 стилей

• Улучшен реализм

• Доступно кинематографическое качество картинки

Мое тестирование и обзор

• Сразу скажу, что по-прежнему ограничено качество видео 720р, и длительность до 10 секунд.

• Новая модель Kling 2.0 доступна только по платной подписке. Я решила затестить улучшенное понимание промптов в модели 2.0, на сайте Kling мне сразу же предложили купить тариф по специальной цене за 7.99$ в первый месяц, затем 8.8$ в месяц вместо 10$. Так что если думали приобрести подписку, есть шанс сэкономить.

• Про быструю генерацию - все зависит от загруженности сервиса, когда за 5 минут делает, иногда 20, реже 40 - когда очередь.

Видео на превью я сделала из этой нейрофото с собой:

Кто хочет научиться профессионально генерировать фото и видео с собой без своего участия - добро пожаловать ко мне на обучение нейрофотосессии, все обновления вы потом бесплатно получаете как член клуба, так как всё быстро устаревает, а на постоянные обучения денег не напасешься, я это понимаю.

Veo 3 официально прошла тест Уилла Смита: спустя два года актёр наконец-то ест спагетти, а не пытается скормить их своей щеке. А все помнят, с чего все начиналось? Если нет, внизу освежила вам память:

Google Veo 3

Google Veo 3 — новейшая нейросеть для генерации видео, которая может создать маленький фильм по вашему сценарию. Причем теперь видео генерируется с озвучкой 🎶: модель не только рисует картинку, но и добавляет звук (музыку, речь персонажей — что нужно). В примерах виде -как круто работает липсинк, как персонаж читает рэп, при этом двигается - это нечто 🔥 Теперь можно делать музыкальные клипы!

Veo 3 понимает физику мира, реалистично двигает объекты и синхронизирует речь с губами персонажей. Хотите смешной скетч или эпичную сценку? Просто опишите в нескольких предложениях сюжет, и ИИ выдаст вам готовый клип, который буквально воплощает вашу историю.

Кстати, предыдущую модель Veo 2 тоже не забросили — ей добавили несколько улучшений, например более точные движения камеры и другие фишки для видеокреаторов.)

Подпишитесь на НейроProfit и узнайте, как можно использовать нейросети для бизнеса, учебы и работы, не теряя свое время.

Google Flow

Google Flow - это студия, в которой можно создать прототип ролика или целую историю с помощью Veo 3. Там все режиссерские фичи: можно задавать через удобный интерфейс персонажей, сцены, объекты, стиль и вообще все ингредиенты вашего будущего видео.

• Вы накидываете идею и описываете кадры словами, а Flow собирает из этого настоящий короткий фильм:

• Можно выбрать, кто в кадре, где идёт действие, какой ракурс камеры – полный контроль над творчеством, но без необходимости самим учиться монтажу.

• Пока что Flow и Veo 3 доступны ограниченно (для подписчиков AI Pro (открывает доступ к основным функциям и 100 генераций в месяц)/Ultra за $250/месяц в США - предоставляет максимальные лимиты и ранний доступ к Veo 3 с генерацией аудио). На видео пример фильма!

Imagen 4

Imagen 4 — теперь рисует поразительно детально и реалистично. Мелкие детали, от сложных узоров тканей до капель воды и пушистого меха животных, передаются с четкостью, которой раньше не хватало.

• Одинаково круто справляется и с фотореализмом, и с абстрактными картинами – будь то портрет в стиле HDR-фото или фантазийный пейзаж маслом.

• Модель научилась генерировать изображения большого размера и нестандартных пропорций. Например, широкоформатные обои на экран или постер 2К-разрешения до 2048 px. Можно даже печатать без потери качества.

• А ещё ИИ наконец-то подружился с текстом на картинках! Теперь выводит надписи и заголовки без ошибок.

Imagen 4 доступен: в приложении Gemini, в инструментах Google Workspace (Слайды, Документы, даже в Google Видеоредакторе для роликов), платформах Whisk и Vertex AI

Кстати, о надежности: Google ставит невидимый водяной знак на все изображения, видео и аудио, созданные ИИ. Технология называется SynthID — она уже пометила свыше 10 млрд файлов. А на I/O запустили и онлайн-детектор, который по файлу определяет, сгенерен он ИИ или нет. Борьба с фейками не стоит на месте)

Надеюсь, я вам все понятно объяснила и осветила и выделила главные моменты

Еще:

• Как оплачивать иностранные сервисы

• А если вам не хочется заморачиваться, в боте Syntx -- это мини приложение в телеграм, есть все популярные модели в единой подписке, и их можно оплатить русской картой. - Процесс я показала на примере создания Нейрофотосессии со своим лицом

Действительно очень круто работает с физикой  - особенно это видно на моем видео с бульдогом, как живой:

Людей не оживляет, даже человекоподобного робота мне на фото не оживил. В общем, если захотите оживлять изображение, убедитесь, что на нем не человек, или не человекообразное существо, а то не пропустит цензура. Мне даже зайца не дал оживить, только вязанную игрушку (на превью), зато качество мне понравилось!

Как сгенерировать такие реалистичные видео

Вообще, более реалистичные по качеству видео получаются из референсов, то есть с предоставлением изображений. И Veo 2 не стал исключением - именно из изображений получились самые качественные видео. Идеально, если они, как мои,  сгенерированы в Midjourney, это самая реалистичная нейросеть пока, что бы кто ни говорил, да и по настройкам ушла далеко вперед. Я учу этому в Закрытом клубе Midjourney.

Ну в целом понятно, что из реалистичных изображений почти любой видеогенератор сделает качественное реалистичное видео. А как дела обстоят с генерацией видео по обычной текстовой подсказке? Разбираемся!

Генерация видео в Veo 2 по текстовой подсказке Text-to-Video

Что касается генерации людей по текстовой подсказке: text-to-video с людьми делает, не работает со знаменитостями.

Очень резво и быстро по промпту мне генерировал походку девушки по пляжу:

Видео загружается в mp4, на выбор можно сгенерировать видео длительностью до 8 секунд, настроить вертикальное или горизонтальное разрешение, и сколько на выходе видео сгенерируется.  

Как и где можно попробовать Google Veo 2:

Видеогенератор можно использовать в AI Studio (нужен иностранный IP-адрес), бесплатно доступно 5 видео в день. Кому мало, вот вам еще 2 бесплатные генерации в день во Freepik — Заходим в Generate Video — Custom и выбираем модель Google Veo 2.

По сравнению с Sora от OpenAI, Veo 2 отличается более реалистичными текстурами и движениями.

В общем, резюмируя, Google Veo 2 хороший видеогенератор, но лучшие видео создаются из изображений референсов, научитесь создавать красивые и реалистичные изображения в Закрытом клубе Midjourney.

А если вы хотите, чтобы вам простым человеческим языком разжевали, какие есть языковые модели (ChatGPT, Claude и иже с ними), зачем они нужны, как с ними взаимодействовать - вам сюда. И уж тем более, если вы пришли с работы и вам некогда тестировать этот нескончаемый поток нейросетей:

Нашла очень занятный инструмент. Сейчас много видеогенераторов на любой вкус и цвет, с прекрасным качеством и реализмом. Но все они создают в основном бессмысленные видео, которые нужно дорабатывать. А хотелось бы историю с сюжетом

Как раз эту задачу решает LTX Studio - здесь можно сделать раскадровку, звуковые эффекты, монтаж и т.д. Это уже более управляемое создание видео.

На одной платформе можно выполнить все этапы производства, начиная с создания персонажей, разработки сцен, заканчивая  работой с камерой. Да, углы обзора камеры и движения объектива для каждой сцены можно настроить, как и в большинстве современных видеогенераторов. Помимо этого, тут же можно добавить эффекты,  музыку и закадровый голос всего одним щелчком мыши.

Сервис любят маркетологи и режиссеры и кинопроизводственные компании, ведь именно для производство кинофильмов изначально и разработали LTX Studio.

Контроль эмоций персонажа

Видео переведено ElevenLabs с сохранением голоса. Работает, если использовать в другой стране 😉

Но самое крутое то, что там можно контролировать эмоции персонажа. То есть это уже вообще другой уровень управления видеогенерациями!

Функция называется Face Expression и находится в  в разделе "Раскадровка" и в редакторе движений. Можно настраивать положение головы, губ, глаз и бровей. Можно протестировать бесплатно.