Transframer: Google создала нейросеть, способную генерировать короткие видео по единственному изображению

В Google объявили о создании новой программы, способной генерировать короткие видеоролики на основе отдельных изображений. Она получила название Transframer – в честь Transformer. другой модели на базе ИИ, используемой с 2017 года в стандартных средах глубокого обучения, таких как TensorFlow и PyTorch. Архитектура нейронной сети Transformer способна генерировать текст через моделирование и сравнение слов в предложении. Новая технология дополнит традиционные решения для рендеринга. И если в Transformer для прогнозирования потенциальных результатов используется язык, то в Transframer для создания коротких видео – изображение с описанием запроса. Технология работает на основе Google DeepMind. Для получения ключевых фрагментов и создания дополнительных изображений анализирует одно изображение. Контекстные – нужны для дальнейшего прогнозирования того, как картинка будет выглядеть с разных ракурсов.

Технология сулит большие возможности создания виртуальных сред с использованием машинного обучения. Создание видео по весьма ограниченному набору данных, семантическая сегментация, классификация изображений, прогнозирование оптического потока – Transframer отлично проявляет себя во всех задачах и тестах.

Также недавно мы писали о том, что в ближайшее время Google внесет изменения в свою поисковую систему с целью эффективной борьбы с кликбейтом. Предпочтения будут отданы реальным отзывам.

Также загляните:

Вышла новая версия Android 13