luma AI: продвинутая нейросеть для оживления фото

Luma AI — нейросеть, которая превращает обычные фотографии, видео или текстовые описания в 3D-модели и видео ролики.

На самом деле, разработчики Luma AI  сделали сервис Dream Machine. Представь: ты описываешь сцену текстом или загружаешь картинку, а программа превращает это в короткое видео. Так как её учили на реальных роликах, движения выглядят почти как в жизни — нет «дрожания» или странных артефактов.

Но идеала пока нет. Иногда нейросеть путается: пишет буквы в случайном порядке, рисует собак с крыльями вместо бегущих или создаёт медведей-мутантов с двумя головами. 

Команда постоянно дорабатывает сервис. Летом 2024 они выпустили Dream Machine 1.5 — теперь система лучше понимает запросы вроде «закат над озером в стиле аниме» и точнее переводит картинки в текст.

Основные возможности

Ссылка: Luma AI

• 3D-моделирование из 2D-изображений и видео
  С помощью смартфона можно снять объект с разных ракурсов, а Luma AI преобразует эти кадры в детализированную 3D-модель с отражениями и текстурой. Например, вы можете создать модель товара для интернет-магазина или персонажа для игры.
  • Форматы экспорта: GLTF, OBJ, USDZ.
  • Советы: двигайтесь медленно при съёмке, отключите HDR и снимайте объект с трёх разных высот для лучшего результата.
• Генерация 3D-моделей из текста (Genie)
  Описываете объект текстом — например, «старинный кожаный дневник на деревянном столе» — и нейросеть создаёт 3D-модель. Это упрощает работу дизайнерам и архитекторам.
• Создание видео из текста и изображений (Dream Machine)
  Например, вводите запрос «котики играют на солнечной поляне», и Luma AI генерирует 5-секундный ролик с плавной анимацией. Можно расширить его до 10 секунд или «оживить» статичное фото, добавив движение.
  • Скорость: 120 кадров за 120 секунд.
  • Ограничение: промпты нужно писать на английском.

 Как начать пользоваться?

1. Регистрация: через Google-аккаунт на сайте lumalabs.ai.
2. Выбор режима:
   • Image-to-Video: загрузите фото, добавьте описание движения (например, «солнечные лучи пробиваются через окно»).
   • Text-to-Video: введите текстовый запрос на английском.
3. Генерация: процесс занимает 2–5 минут. Результат можно скачать в MP4 или расширить.

Советы для качественных промптов:

• Детализируйте описание («чайки парят на фоне заката, волны разбиваются о скалы»).
• Указывайте движение и атмосферу («лёгкий ветер колышет листья»).

Как сделать видео в Luma AI по своему описанию? 

Как правильно описать видео в тексте:
— Пиши максимально конкретно. Например: «Красный мяч катится по мокрому асфальту, камера медленно приближается к нему». Добавь детали: что происходит вокруг, как двигаются объекты.
— Не забудь про настроение. Отдельно укажи, например: «Хочется ощутить спокойствие летнего вечера» или «Нужна динамика и энергия».
— Избегай сложных слов. Лучше «девочка прыгает через лужу» вместо «персонаж женского пола осуществляет прыжок над водной поверхностью».

Важный лайфхак: под строкой ввода есть галочка «enhance prompt». Её лучше не убирать! Система сама добавит детали к запросу, чтобы результат получился лучше. Например, один пользователь попросил «розовую таксу, которая бежит за тапками хозяина».

Без этой галочки нейросеть покрасила в розовый не собаку, а тапки. Смешно, но не то что нужно.

Если результат с «enhance prompt» не понравился, сними галочку и опиши сцену сам — подробно, в 3-4 предложения. Например: «Женщина в балетной пачке кружится в центре зала, её руки плавно поднимаются вверх. На заднем плане другие танцоры кланяются».

Как оживить картинку:
Можно загрузить своё фото (JPG, PNG) или взять изображение, созданное в Midjourney, DALL·E. Лучше выбирать картинки в формате 16:9 — так видео получится качественнее. После загрузки напишите в описании, что должно происходить. Например: «Кот подпрыгивает, пытаясь поймать мышку на верёвочке».

Совет: народ любит оживлять старые мемы. Вот, например, как в Luma получился знаменитый кот из мемов, который двигается.

Попробуй — это весело!

Главное — экспериментируйте. Если первый результат странный (например, у людей иногда руки не на месте), поправь описание или поменяй настройки. С опытом станет проще «договориться» с нейросетью.

 Тарифы и ограничения

• Free: 30 генераций в месяц, водяной знак, стандартный приоритет, разрешение 720p.
• Lite ($9.99/мес.): 70 генераций, высокий приоритет, без коммерческого использования.
• Standard ($29.99/мес.): 150 генераций, коммерческое использование, 1080p.
• Pro/Premier (до $499.99/мес.): до 2430 генераций, высший приоритет, премиум-поддержка.

Важно! Для оплаты требуются карты иностранных банков

 Плюсы и минусы

Доступность: работает через браузер или приложение, не требует мощного ПК.
Скорость: создание 3D-моделей за 30 минут вместо недель.
Ограничения:

• Нет поддержки русского языка для промптов.
• Иногда артефакты в видео (например, неестественные движения).

FAQ