Как сообщает Naked Science, инженеры Федеральной политехнической школы Лозанны представили робота RAVEN (Robotic Avian-inspired Vehicle for multiple ENvironments).
Устройство, вдохновленное анатомией птиц, способно не только летать, но и перемещаться по земле, прыгать и преодолевать препятствия.
RAVEN имитирует движения птиц: его ноги с торсионными пружинами и эластичными суставами обеспечивают плавный переход от ходьбы к прыжку и взлету. Эксперименты показали, что прыжок с разбега является наиболее энергоэффективной стратегией, опережая взлет с места или падение с высоты.
Ученые отметили, что бионическая конструкция RAVEN увеличивает его мобильность, позволяя обходиться без традиционных взлетно-посадочных полос. Это делает разработку перспективной для применения в сложных условиях, включая местность с препятствиями.
Дрон успешно прошел испытания, выполняя сценарии, недоступные для стандартных колесных моделей, такие как перепрыгивание через пропасть или преодоление низких препятствий. Разработка RAVEN открывает путь к созданию универсальных аппаратов для задач в труднодоступных зонах.
Google представила Lumiere — «модель пространственно-временной диффузии для реалистичной генерации видео», основанную на искусственном интеллекте.
Как показала практика, это, возможно, самый мощный на сегодняшний день ИИ-генератор видео, создающий динамические изображения по текстовому описанию.
Важнейшим отличием Google Lumiere от существующих аналогов является уникальная архитектура модели — видео по всей его продолжительности генерируется за один проход. Другие модели работают по иному принципу: они генерируют несколько ключевых кадров, а затем производят интерполяцию по времени, что затрудняет согласованность генерируемого ролика. Lumiere работает в нескольких режимах, например, производит преобразование текста в видео, конвертирует статические изображения в динамические, создаёт видеоролики в заданном стиле на основе образца, позволяет редактировать существующее видео по письменным подсказкам, анимирует определённые области статического изображения или редактирует видео фрагментарно — например, может изменить предмет гардероба на человеке.
«Мы обучаем нашу модель T2V [преобразования текста в видео] на наборе данных, включающем 30 млн видеороликов с текстовыми описаниями. Видео имеют длину 80 кадров с частотой 16 кадров в секунду. Базовая модель обучена на разрешении 128 × 128 пикселей», — пояснили в Google. На выходе получаются 5-секундные ролики с разрешением 1024 × 1024 пикселей.
Нейросеть Lumiere от Google
Google Lumiere — конечно, не первый ИИ-генератор видео. Сама Google ранее демонстрировала модель Imagen Video, которая генерировала ролики разрешением 1280 × 768 точек с частотой 24 кадра в секунду, но её творения были намного более скромными. Меньшим реализмом отличались результаты таких проектов как Meta✴ Make-A-Video, Runway Gen2 и Stable Video Diffusion. В Google понимают угрозу, которую могут представлять подобные проекты: «Основная наша цель в этой работе — дать начинающим пользователям возможность генерировать визуальный контент гибко и творчески. Однако существует риск неправомерного [создания] подделок или вредоносного контента при помощи нашей технологии, и мы считаем, что крайне важно разрабатывать и применять инструменты выявления случаев предвзятости и злонамеренного использования, чтобы обеспечить безопасную и добросовестную работу [модели]».
