тоже моушн のテレグラム投稿

колыбельная. опять мрачняк - ну такое настроение

мой новый личный фаворит среди опенсорсных видео моделей - LTXVideo+STG. по качеству конечно не Hunyuan, зато работает в 8 раз быстрее и к тому же умеет в img2vid

до сих пор до конца не верю что оживлятор картинок подобного уровня теперь доступен локально. все еще не сора и не клинг но уже заметно лучше чем SVD

за трек спасибо прекрасному Demien Stoker

кастомные ноды ComfyUI-LTXVideo
подробней про STG
нативная поддержка LTX в свежем комфи
workflow img2vid

@тоже_моушн

Ну что, друзья? Встречайте FaceTracker for Blender (Beta)

Наше фирменное решение для трекинга лиц теперь доступно каждому прямо в Blender. Сгенерировать 3D модель лица по кадрам из видео, потрекать мимику, омолодить или состарить, добавить тату, 3D эффект или симуляцию — все это теперь легко сделать, не закрывая Blender!

Что вас ждёт:
– Быстрый и точный трекинг головы и мимики
– Встроенный FaceBuilder для создания на ходу моделей лица
– Генерация текстур лица: анимированной или смешанной по выбранным кадрам
– Экспорт FACS блендшейпов
– Интеграция во внешние пайплайны
И многое другое!

Скачать FaceTracker for Blender

FaceTracker сейчас в открытой бете, а значит доступен бесплатно для всех.

Важно: FaceTracker трекает головы только в FaceBuilder-топологии. Чтобы каждый мог опробовать все возможности FaceTracker, мы сбросили нашу триалку FaceBuilder для всех вне зависимости, использовали ли вы его раньше или нет!

Качайте, пробуйте и делитесь результатами!

если вам тоже было интересно как затанцевать макароны, держите воркфлоу для комфи а также свежий пошаговый видео туториал

магия происходит конечно же благодаря ip-adapter и qrcode-monster controlnet. а за хорошую скорость генерации отвечает lcm моделька. все необходимые ссылки есть в туториале

workflow на civitai
туториал
ig автора воркфлоу

@тоже_моушн

признаюсь, я не большой любитель аудио генераций. немного баловался с suno но вау эффекта не получил

однако с этим треком ситуация ровно наоборот - полное попадание в мои персональные музыкальные мурашки и желание слушать его на репите. автор - мой хороший друг, исполнитель - udio. не представляю как у Саши получилось так лихо укротить сетку и так сочно передать вайбы и звучание электронной музыки 2010х. некоторые "семплы" просто бомбические. лайк тому кто расслышит воинственный клич Зены королевы воинов

а еще это хороший повод протестить keyframes в dream machine. фича классная но полный рандом

трек
оригинальный пост

@тоже_моушн

В Казани стартовал международный фестиваль медиаискусства NUR. На нем представлена инсталляция EYE, созданная в коллаборации четырех независимых хужодников из SILA SVETA: Ilia Balakin, EGO, Vsevolod Taran и Alexander Karelin.

Искать инсталляцию нужно во дворе «Национального музея», ее центральный элемент — сцена-ракушка — превращена в око искусственного интеллекта. Зрачок перед сценой олицетворяет ИИ, который с помощью нейронных сетей в real-time по-своему интерпретирует и человека, и пространство вокруг него. Все происходящее выводится на экран, позволяя каждому посетителю увидеть, как современные технологии могут изменять наше восприятие мира.

Участие в NUR и других медиафестивалях — это возможность для команды достать из заметок и воплотить в жизнь крутые и вдохновляющие идеи, которые приходили в процессе поиска креативных решений на коммерческих и RnD-проектах.

Скоро поделимся комментариями создателей EYE и фото с места событий.

очень милый и визуально приятный кейс - ручная анимация цветных шейпов в бесплатной рисовалке Tagtool на айпаде с дальнейшей реалтайм обработкой в TouchDesigner с помощью StreamDiffusion

это дело рук VJ Suave - дуэта медиахудожников из Бразилии. подробней про проект можно почитать у Demien Stoker

StreamDiffusion - это ну очень быстрый txt2img: запросто выдает 15 fps на 4090 в разрешении 512. и это реально выглядит как реалтайм! туториал для желающих повторить у себя

автор компонента StreamDiffusion для тача DotSimulate уже прикрутил к нему ControlNet но предположу что это повлияет на fps негативно, нужно тестить. кстати есть еще бесплатная альтернатива от Олега Чомпа

inst VJ Suave
Tagtool app
пост Demien Stoker
patreon DotSimulate
туториал на ютуб
github StreamDiffusion
StreamDiffusion-NDI by Oleg Chomp

@тоже_моушн

Pain - Push the pusher (Ai animation official music video)

Directed by: Dmitry Alekseev
Written and created: Dmitry Alekseev & Sergey Kozlov

Tools: Midjourney x Photoshop x After Effects x Premiere Pro
Character Voices: Elevenlabs

WATCH FULL VIDEO ON YOUTUBE

ура, вышел плагин Gaussian Splatting для After Effects от irrealix

это значит что ply файлы сплатов созданные в LumaAI, Postshot, Scaniverse, Polycam или Nerfstudio теперь можно импортировать в афтер и встраивать в привычный пайплайн. благо количество добавленных в плагин плюшек, эффектов и настроек это позволяет

для тех кто не готов платить - можете протестить бесплатный плагин от Postshot но он не умеет и трети от того что заложено в новом плагине, на который кстати действует скидка до 26 апреля

@тоже_моушн

небольшой тизер-анонс двух долгожданных инструментов для 3DGS. видео выше сделано с их помощью.

первый - плагин для AE. чтобы импортировать сплаты в афтер, использовать по классике параллельно с текстом и любыми 3д слоями, а еще лихо навешивать на сплаты различные эффекты. считанные часы до релиза!

второй - аддон для Блендера. позволяет "запечь" 3д сцену - со всеми материалами и освещением в формат ply, чтобы дальше отправить это в AE, Unity, UE, Touchdesigner или вообще встроить на сайт. аддон пока дорабатывается но уже показал хорошие результаты.

кстати черепушку из видео можно покрутить по этой ссылке (к сожалению смартфоны пока не тянут). а готовый сплат ищи в комментах

@тоже_моушн

давненько не брал я в руки сплатов)
а если честно то особо и не погружался в эту тему глубоко. чтобы исправить это недоразумение, вашему вниманию:

внезапный обзор на бесплатные гауссиановы сплаты

Scaniverse
приложение для iOS, обучается быстро, заметно нагревает айфон, на экранчике выглядит красиво но для продакшна не годится

LumaAI
в представлении не нуждается, работает с телефонов и в браузере, выдает стабильно хороший результат, заложены всякие полезные плюшки

Jawset Postshot
работает локально, любит железо помощнее, обучается небыстро, зато красивый результат.
демо видео

а еще при установке Postshot спрашивает, не хотите ли плагин для афтера чтобы крутить свои сплаты как взрослый) лично не тестировал, но по секрету скажу что в скором времени нас ожидает гораздо более фаршированный плагин 3DGS для афтера, не переключайтесь

безобразие что до сих пор нет нормального импорта сплатов в блендер! есть плагин для рендера на сайклс но камон, это не реалтайм

а если хотите реалтайм - вот вам ассет для Touchdesinger. если чуть поиграться, можно добиться эффектов как на видео

@тоже_моушн