Dream Machine от Luma AI расширяет доступ к созданию видео с помощью генеративного ИИ
Dream Machine — это новая мощная система искусственного интеллекта, способная генерировать высококачественные видеоролики на основе простых текстовых подсказок, что дает возможность создавать новый и оригинальный видеоконтент за считанные минуты.
По словам Luma AI, Dream Machine теперь доступна каждому. Чтобы создать видео и максимально эффективно использовать возможности Dream Machine, пользователям необходимо ввести больше описательных подсказок. Например, такая подсказка, как «милый щенок далматинца, бегущий за мячом на пляже на закате», приведет к созданию чрезвычайно реалистичного пятисекундного видеоклипа, показывающего именно это. Dream Machine сможет создать такое видео всего за две минуты.
Преобразование текста в видео находится на переднем крае технологии искусственного интеллекта, и Luma AI сталкивается с жесткой конкуренцией в этом бизнесе. Недавно компания OpenAI анонсировала новую модель под названием Sora, которая может генерировать видео продолжительностью до минуты, сохраняя при этом качество изображения и соответствие запросам пользователя. Также среди конкурентов такие стартапы, как Lightricks Inc., Pika Labs Inc. и Runway Inc.
Сила платформы Luma AI заключается в ее способности точно отображать определенные объекты, персонажей, действия и окружение, рассказывать связные истории и поддерживать плавное движение всех объектов. Возможно, самым большим преимуществом Dream Machine является то, что Luma AI выбрала подход с открытым исходным кодом. Хотя Sora от OpenAI впечатляет, в настоящее время она доступна только избранной группе пользователей, и компания намекнула, что ее лучшие возможности будут доступны только для платных подписчиков.
При этом Dream Machine теперь доступна каждому, кто готов поэкспериментировать с платформой. В будущем Luma AI выпустит различные API и плагины для интеграции платформы с творческими программными инструментами, такими как Adobe.
Предлагая более открытый подход к преобразованию текста в видео, Luma AI может воспользоваться преимуществом первопроходца, создав вокруг Dream Machine сообщество разработчиков и авторов. Это важно, поскольку в индустрии генеративного искусственного интеллекта идет очень жесткая конкуренция, и есть множество других игроков, которым еще предстоит дебютировать с продуктом для преобразования текста в видео, например, Anthropic PBC, Cohere Inc., AI21 Labs Inc. и Mistral.
Скорее всего, лидерами в этой развивающейся области станут те, кто сможет создавать видео высочайшего качества по самой низкой цене. Однако сделать это непросто. Одной из основных проблем при преобразовании текста в видео является качество видео, создаваемого большими языковыми моделями. До сих пор было очень сложно создавать видео, которые выглядели бы реалистично, но демоверсии, размещенные на веб-сайте Luma AI, позволяют предположить, что компания, похоже, справилась с этой задачей.
Тем не менее, Luma AI также признает, что ее модели видеогенераторов испытывают трудности в некоторых областях, таких как воссоздание естественных движений, морфинг-эффектов и текста.
