Google представила обновлённую версию ИИ-приложения для заметок NotebookLM, которая теперь умеет анализировать видео на YouTube и быстро извлекать ключевые моменты из длинных видеороликов, преобразуя их в текст и тематические ссылки. Раньше приложение могло обрабатывать только текстовые форматы.

Источник изображения: Copilot

В основе новой функции лежит технология транскрибирования — преобразование аудио в текст. После того, как пользователь вставит ссылку в NotebookLM на видео, которое нет возможности посмотреть целиком, искусственный интеллект самостоятельно создаст краткий обзор основных тем, обсуждаемых в видео, поясняет издание The Verge. Пользователи также смогут получить более подробную информацию, кликнув на ссылку с определённой темой.

Источник изображения: Theverge.com

При тестировании новой функции в видеообзоре iPhone 16 Pro на канале The Verge, NotebookLM сгенерировало такие темы, как «Искусственный интеллект Apple», «Камера iPhone 16 Pro» и «Обработка фотографий». При выборе одной из тем приложение не только предоставляло информацию, но и ссылалось на конкретные моменты в видео, где эта информация упоминается, что позволило быстро найти нужные фрагменты. Примечательно, что на основе содержимого видео пользователи также могут создать аудиорезюме для прослушивания в формате подкаста.

Источник изображения: Google

Стоит отметить, что новая функция может не сработать с недавно добавленными роликами, в частности, опубликованными менее чем за два дня до запроса. Тем не менее, в большинстве случаев приложение NotebookLM продемонстрировало высокую степень точности и надёжности.

В то время как Gemini от Google и Copilot от Microsoft могут транскрибировать и обобщать видео, новая версия NotebookLM способна обрабатывать также и аудиозаписи, что делает приложение универсальным инструментом для использования в различных областях.

Google выпустила приложение NotebookLM — это блокнот на основе искусственного интеллекта, представленный в мае на конференции I/O 2023 и прежде носивший название Project Tailwind. Как и ИИ-чат-бот Bard, блокнот NotebookLM теперь полагается на нейросеть Gemini Pro. Новое приложение стало доступно жителям США, и чтобы воспользоваться им, уже не надо записываться в список ожидания.

Источник изображений: 9to5google.com

С помощью NotebookLM пользователь может обобщить несколько заметок и объединить их в одну, создать на их основе схему, учебное пособие или руководство, превратить «заметки в рассылку по электронной почте, план сценария, черновик маркетингового плана». Также есть возможность экспорта заметок в «Google Документы».

В ходе работы пользователя NotebookLM будет «динамически предлагать действия в зависимости от того, что тот делает». Если, например, пользователь выделяет отрывок во время чтения какого-либо источника (PDF или сайта), NotebookLM «автоматически предложит суммировать текст в новую заметку или поможет ему понять технический язык или сложные идеи».

Когда пользователь пишет заметку, NotebookLM предложит инструменты для улучшения стиля или соответствующие идеи из имеющихся у него источников на основе того, что пользователь только что написал.

Пользователь теперь может выбирать источники из перечисленных на боковой панели, для использования в той или иной работе. Google увеличила лимит на количество используемых источников до 100. Также в NotebookLM предусмотрена возможность скрыть источник, есть функция быстрого перехода от цитаты к источнику. Все новые возможности появятся у NotebookLM в ближайшее время с выходом Gemini Pro.

Ранее в этом году на мероприятии I/O для разработчиков компания Google представила прототип ИИ-инструмента Project Tailwind, способный существенно упростить пользователю работу с документами и заметками, которых в некоторых случаях может накопиться очень много. Теперь доступ к ИИ-советнику, помогающему разобраться в записях, получили обычные пользователи.

Источник изображения: Stones24/pixabay.com

Project Tailwind стал доступен в США под названием NotebookLM, пока что для ограниченного числа пользователей. Как объясняют в компании, языковая модель продукта обучается исключительно на заметках и источниках пользователя и не имеет доступа в интернет как многие другие чат-боты. Речь идёт об ИИ-блокноте, который может составить краткое содержание того или иного текста, выделить ключевые мысли или генерировать на их основе идеи.

Существующая версия приложения будет обучаться на контенте, загружаемом из Google Docs пользователя. Пользователь сможет выбрать ряд своих документов, а затем использовать NotebookLM, чтобы задавать вопросы о них и даже создавать новые материалы на их основе.

Источник изображения: Google

Google приводит несколько примеров использования новинки. Она может составить краткое содержание документа, или предложить по запросу пользователя идеи на основе документов. Например, пользователь может загрузить идеи для нового видео и попросить создать сценарий короткого ролика. Или, например, стремящийся привлечь средства предприниматель может загрузить свой проект и спросить, какие вопросы может задать потенциальный инвестор.

При этом компания предупреждает, что, как и в случае с другими языковыми моделями, не исключены ошибки в работе ИИ, поэтому факты стоит всё же проверять. Жители США уже могут записаться в список ожидания, остальные, вероятно, получат доступ к новому инструменту позже.