Где чат взорвался — там и клип
Из трёхчасового стрима в ленту попадает минута, может две. Руками искать их — целый вечер перемотки. Клипни делает это за 10–20 минут, и вот как.
Четыре сигнала эфира
- Речь. Распознаём весь эфир с точным временем каждого слова. Это и основа субтитров, и материал для ИИ: споры, шутки, панчлайны.
- Голос. Всплески громкости, смех, крик. Эмоциональные слова — «вау», «ого» — ищем целыми словами, чтобы «ого» не находилось в «много».
- Чат. Для записей Twitch, Kick и YouTube берём повтор чата и смотрим, где он ожил. В примере с главной страницы чат писал в 3,3 раза чаще обычного — это сильный сигнал.
- Картинка. Резкое движение в кадре помогает найти моменты без слов: клатч, фейл, неожиданный поворот в игре.
Чат не обязателен. Если зрителей пока мало, речи, голоса и картинки хватает, чтобы найти клипы.
ИИ смотрит всю запись и собирает историю
Сигналы подсказывают, где смотреть. Дальше ИИ читает всю запись кусками, смотрит на кадры и ищет у каждого кандидата завязку, напряжение и развязку. Клип без развязки не досматривают — поэтому слабые клипы получают второй взгляд: ИИ продлевает их до конца истории, начинает с зацепки и убирает хвост.
Сколько клипов и какой длины — решает автопилот, клипы не перекрываются. Можно и попросить своё: «только фейлы» или «смешное и донаты».
«Сила момента»: оценка, которую можно проверить
У каждого клипа есть число от 0 до 100: 65% — оценка сюжета от ИИ, 35% — сигналы эфира: голос, чат, эмоции. Рядом — объяснение обычными словами.
Пример с главной страницы, сила 87: «Раунд на одном хп против троих — у ролика есть завязка, напряжение и развязка с криком радости».
Видно, за что выбран момент, и сразу понятно, стоит ли его выкладывать. Клипы в проекте идут от сильных к слабым.
Что мы проверили и убрали
Мы пробовали режим «Сначала кульминация»: клип открывается самым ярким местом, потом идёт предыстория. В сравнении обычный клип оказался лучше в 5 случаях из 6 — и мы убрали этот режим. Так же проверяем следующие изменения: на настоящих эфирах и отзывах тестировщиков.
Ты стример? Присоединяйся
Клипни в закрытой бете: нарезка бесплатна для участников группы тестировщиков. Там же новости и быстрая помощь, а твои отзывы прямо влияют на то, что мы делаем дальше.