Jul 25, 2024 • 08:24

Выделить главное: как ИИ помогает собрать ключевые фрагменты из видеоконференций

Jul 25, 2024 • 08:24

Данная страница содержит «вставки» с других сайтов, скрипты которых могут собирать ваши личные данные для аналитики и своих внутренних потребностей. Редакция рекомендует использовать браузеры с блокировкой трекеров для просмотра таких страниц. Подробнее →

Современный мир трудно представить без видеозвонков. Ведь это удобный инструмент для обсуждения будущих планов, выполнения совместной работы и даже образовательной деятельности.

Сегодняшние сервисы, в том числе российские, предлагают различные удобства для эффективной коммуникации онлайн. Интересно и то, что такие платформы стремительно развиваются и внедряют передовые технологии, в том числе искусственный интеллект.

ИИ, как оказалось, можно применить и здесь. Те, кто часто посещают созвоны, могут согласиться, что раньше немало времени занимала обработка и расшифровка таких встреч, чтобы выделить главные тезисы прошедших обсуждений.

А сегодня алгоритмы всё это способны делать за человека, упрощая коммуникацию и повышая его продуктивность. Например, ИИ способен выделить ключевые фрагменты прошедших звонков и сформировать из них короткий ролик с основными тезисами.

Как это работает, коротко рассказываем на примере недавно представленных видеохайлайтов — функции, которую разработала MTS AI совместно с МТС Линк, отечественной экосистемой сервисов для бизнес-коммуникаций и совместной работы, предлагающей пользователям возможности проведения онлайн-встреч и занятий, а также вебинаров и прочего.

Функция доступна по запросу в службу технической поддержки МТС Линк.

Как это работает?

ИИ в МТС Линк уже умеет генерировать краткое текстовое содержание видеоконференции с основными моментами, выдават автоматическую расшифровку, а также искать те или иные фрагменты по ключевым словам. В целом, разнообразие ИИ-функций здесь довольно насыщенное:

Например: «умный зум», который автоматически фиксирует участника в центре кадра, ИИ-шумоподавление и даже ИИ-помощник в корпоративном мессенджере, генерирующий краткое содержание длинных переписок. Последняя фишка, правда, тоже в бета-тесте.

Следующим этапом стало внедрение видеохайлайтов, просмотр которых не занимает много времени в отличие от полноценного изучения видеоконференции. Команда провела собственное исследование и рассказала, что с необходимостью смотреть пропущенные рабочие встречи сталкиваются 93% пользователей:

В среднем такая потребность возникает 3-4 раза в месяц, но значительная доля пользователей смотрит записи несколько раз в неделю.

Видеозвонок с группой людей из разных мест. Улыбки, жесты рук, интерфейс звонка с кнопками и таймером.

В реализации видеохайлайтов вновь пригодился ИИ. Он буквально способен выделять из всей встречи важные моменты и тезисы обсуждений, а далее — формировать из этого короткий клип.

Чтобы это работало, команда MTS AI разработала специальный классификатор текстов на базе машинного обучения. В мире ИИ-технологий классификация текста означает задействование методов обработки естественного языка. Такие технологии применяются в том числе для работы с устной и письменной речью.

Как на деле? Такие алгоритмы умеют предсказывать наиболее подходящие категории для текста. В современных программах обычно это задействуется в различных функциях. Например, в почтовых сервисах ИИ таким образом помогает обнаружить спам, а в файлообменниках — сортировать по категориям документы.

Разработанный классификатор текста позволил определять смысл и важность каждой реплики, озвучиваемой в видеоконференции. Его обучили на основе 200 расшифровок внутренних встреч продолжительностью до одного часа.

Создавая классификатор, специалисты предварительно разметили данные по следующим пяти ключевым категориям событий — оглашение повестки встречи, принятие важных решений, предложение идей, выражение согласия или возражения, а также смена эмоций в процессе разговора.

Если говорить простыми словами, то искусственный интеллект понимает, в какой момент обсуждается повестка созвона или, допустим, в какой момент один из участников предлагает какую-либо идею. Все эти важные тезисы и собираются в единый видеоклип.

Что интересно, для обучения классификатора текста учитывался и контекст из соседних реплик. Такой подход дал модели возможность эффективно захватывать сложные зависимости в обрабатываемых данных и позволил увеличить точность классификации текста.

Повестка встречи на видеоконференции и её итоги стали основными фрагментами, из которых сейчас составляются видеохайлайты. Выбор именно этих фрагментов позволил сервису оптимизировать длительность самих видеохайлайтов.

При этом использование технологии при необходимости можно расширить, подключив и остальные упомянутые выше категории.

Как подключается?

Для подключения видеохайлайтов нужно написать в службу технической поддержки. Чтобы начать работать с видеохайлайтами, следует выполнить несколько простых действий:

Нужно перейти в запись встречи в «Личном кабинете». Важно: во время самой встречи нужно не забыть включить текстовую расшифровку, иначе хайлайты не сгенерируются.

Далее остаётся нажать на кнопку «Проигрывать ключевые моменты».

После чего будет доступен короткий клип всей видеоконференции.

Что в итоге?

Ещё одна ИИ-функция принесёт тысячам пользователей заметную пользу, так как сокращается время на просмотр прошедших записей и можно не заходить на встречи, которые носят лишь информационный характер.

Также это полезно при возвращении к старым записям — то, что обсуждалось месяц назад, получится вспомнить за несколько минут. В очередной раз ИИ упрощает жизнь: приятно, что подобные возможности становятся доступными и в отечественных сервисах в том числе благодаря MTS AI.