Блог Сабатовского

Новая нейросеть SAM 2*. Что она может?

2024-11-07 17:33 Креатив Нейросети Развитие
Представь себе: ты просто загружаешь видео, и нейросеть сама вырезает любой объект, даже если он размыт или мелькает как бешеный. Раньше такие функции у нейронок работали не идеально: обрезали не то, что нужно, или оставляли много лишнего. Но теперь есть SAM 2*! Нейронка появилась в этом году, и сейчас я тебя познакомлю с ее функционалом.
Кстати, я подготовил целую бесплатную программу, чтобы научить тебя создавать крутые видосы, которые будут выделяться на любых фестивалях. На бесплатном интенсиве по созданию видео ты научишься монтировать, узнаешь, как продвигать свой личный бренд и где находить клиентов. Там тебя ждет мой куратор, который вместе с тобой пройдет весь этот путь. К концу такого обучения ты будешь полностью погружен в процесс и готов к новым проектам. Переходи к бесплатному интенсиву.

Функции SAM 2*:

  • Вырезание объектов из видео.
SAM 2 *выделяет объект, даже если он размыт, быстро движется или уходит за что-то. В нейронке есть специальная функция под названием «occlusion head». Объект временно исчезает из кадра, но модель всё равно помнит, где он должен быть.
  • Отслеживание объектов.
SAM 2* не просто режет видео, а ещё и отслеживает объект на протяжении всего ролика.
  • Разные способы выделения.
Можно задать объект для вырезания, просто указав на него точкой, выделив контур или загрузив маску. Модель сама поймёт, что ты хочешь вырезать, и будет отслеживать это в каждом кадре.
  • Экспорт и работа с фоном.
Ты можешь заменить фон на стандартный пресет или оставить зелёный экран, чтобы потом работать с ним в других программах.

Примеры использования SAM 2*:

  1. Отделить статичный объект, который мешает в кадре.
  2. Редактировать сложные видео, например, с гонками.
  3. Подсветить/выделить объект в информативном видео.
  4. С помощью нейронки можешь создавать графику прямо в монтажной программе, без использования After Effects.
Нейросеть бесплатная и не требует регистрации. Просто заходи и используй.
Но не забывай про ограничение в размере загружаемого файла — 70 Мб.

Ты можешь установить нейросеть на свой компьютер и пользоваться ей. Но можно и не скачивать. Достаточно и веб-версии, она работает отлично.

SAM 2* — не просто нейросеть, а полноценный инструмент для тех, кто хочет вывести свои навыки в создании видео на новый уровень. Это однозначно стоит попробовать.
*Организация Meta, а также её продукт SAM 2, на который мы ссылаемся в этом тексте, признаны экстремистскими на территории РФ.