TAPe Reverse
Video Search
основанный на TAPe
Мы тестируем TAPe RVS, временый прототип очень новые возможности TAPe reverse video search, открывающие вам новые пользовательские возможности: возможность искать видео по видео, нежели чем через текстовое описание.
Мы тестируем TAPe RVS, прототип видеопоисковой системы по видео. Поисковая система основана на методах TAPe и позволяет пользователям искать нужное видео в проиндексированном видеоархиве: система быстро сравнивает видео пользователя (поисковый запрос в виде видео) с базой данных проиндексированных видео - и выдает результат.
TAPe, или Теория активного восприятия - это набор методов, которые мы обнаружили и разработали, позволяющих создавать новые способы получения и обработки информации, создавать технологии обработки информации, которые на порядки эффективнее существующих решений, методов и технологий. Под «на порядки эффективнее» понимается буквально в тысячи раз меньшая вычислительная мощность, меньшее время, меньшие затраты денег и других ресурсов.
TAPe, или Теория активного восприятия - это набор методов, которые мы обнаружили и разработали, позволяющих создавать новые способы получения и обработки информации, создавать технологии обработки информации, которые на порядки эффективнее существующих решений, методов и технологий. Под «на порядки эффективнее» понимается буквально в тысячи раз меньшая вычислительная мощность, меньшее время, меньшие затраты денег и других ресурсов.
На самом деле новый способ поиска
Поскольку видео являются самым быстрорастущим контентом, но также и самым сложным для обработки, мы начали с создания базы индекса фильмов. Индекс является наиболее важной частью любой поисковой системы для любого типа информации, включая текст, изображения и видео. На данный момент мы уже проиндексировали 80 тысяч фильмов (художественные фильмы, документальные фильмы, а также сериалы и телешоу) в нашей базе данных. Скорее всего, вы смотрели или даже слышали менее чем об 1% этой базы.
Вторая важная функция - это поиск по телевидению, где мы отслеживаем трансляции самых популярных телеканалов мира. TAPe RVS позволяет пользователю узнать, когда и на каком канале транслировался нужный эпизод видео.
Для тестирования видеопоисковой системы с обратным поиском мы разработали виджет, API и расширение, которые вы можете попробовать здесь.
Вторая важная функция - это поиск по телевидению, где мы отслеживаем трансляции самых популярных телеканалов мира. TAPe RVS позволяет пользователю узнать, когда и на каком канале транслировался нужный эпизод видео.
Для тестирования видеопоисковой системы с обратным поиском мы разработали виджет, API и расширение, которые вы можете попробовать здесь.
TAPe RVS быстро распознает, какой фрагмент фильма, сериала или шоу используется. Вы сможете найти полную версию фильма или сериала, используя этот фрагмент. TAPe RVS также позволит просмотреть, что происходило до/после видеофрагмента. Просто найдите интересный видеофрагмент, загрузите его в систему, позвольте системе определить источник, а также точное время и место фрагмента (сериал, сезон, эпизод). Посмотрите, что происходило до/после фрагмента, или просмотрите полную версию на официальном ресурсе (стриминговый сервис, онлайн-кинотеатр и т.д.).
Кроме того, TAPe RVS позволяет узнать, когда и на каких телеканалах транслировался нужный вам эпизод, будь то новости о событии, реклама, шоу, фильм и т.д. Эта функция подходит для любых целей, включая PR, маркетинг, аудит, исследования, и может быть полезна для широкого круга организаций, включая государственные учреждения. В демо-версии глубина поиска ограничена 7 днями и 20 самыми популярными мировыми телеканалами.
Кроме того, TAPe RVS позволяет узнать, когда и на каких телеканалах транслировался нужный вам эпизод, будь то новости о событии, реклама, шоу, фильм и т.д. Эта функция подходит для любых целей, включая PR, маркетинг, аудит, исследования, и может быть полезна для широкого круга организаций, включая государственные учреждения. В демо-версии глубина поиска ограничена 7 днями и 20 самыми популярными мировыми телеканалами.
Как это работает
Допустим, у вас есть фрагмент из фильма, но вы не знаете, из какого он фильма. Или у вас есть видеофрагмент, и вы хотите узнать, какие телеканалы и когда его транслировали. С помощью TAPe RVS вы можете искать свой фрагмент в нашей огромной библиотеке фильмов. Кроме того, вы можете искать связанные видео на 20 самых популярных телеканалах.
Вы также можете посмотреть самые популярные сцены из этого фильма, отобранные с использованием технологии TAPe RVS. Каждый видеофрагмент сопровождается списком ссылок на YouTube, содержащих это видео. Это основа, которую система использует для составления рейтинга - чем больше ссылок на YouTube с определенной сценой из фильма, тем популярнее она считается. Это вполне логично.
Вы также можете посмотреть самые популярные сцены из этого фильма, отобранные с использованием технологии TAPe RVS. Каждый видеофрагмент сопровождается списком ссылок на YouTube, содержащих это видео. Это основа, которую система использует для составления рейтинга - чем больше ссылок на YouTube с определенной сценой из фильма, тем популярнее она считается. Это вполне логично.
Для поиска по телевидению мы непрерывно храним записи 20 телеканалов за последние 7 дней. Каждая трансляция содержит загруженный фрагмент плюс одну минуту до и после него. Мы можем включить в систему любой канал, полученный из любого источника сигнала: веб, спутник, эфир и т.д.
АПИ для всех: блоггеров, компаний, корпораций, простых пользователей
Хотя метод TAPe может применяться ко всем цифровым технологиям, на протяжении многих лет наша команда сосредоточилась на инструментах распознавания и анализа видео, основанных на TAPe.
Экспертиза, накопленная при создании десятков минимально жизнеспособных продуктов, концепций и индивидуализированных решений, теперь доступна для использования в предприятиях и исследованиях с помощью TAPe Video Search API. Его основные функции заключаются в захвате и анализе терабайт видеоконтента (хранящегося онлайн или локально), а также в поиске полных дубликатов и/или похожих фрагментов. Свяжитесь с нами, если вы заинтересованы в доступе к TAPe Reverse Video Search API.
Экспертиза, накопленная при создании десятков минимально жизнеспособных продуктов, концепций и индивидуализированных решений, теперь доступна для использования в предприятиях и исследованиях с помощью TAPe Video Search API. Его основные функции заключаются в захвате и анализе терабайт видеоконтента (хранящегося онлайн или локально), а также в поиске полных дубликатов и/или похожих фрагментов. Свяжитесь с нами, если вы заинтересованы в доступе к TAPe Reverse Video Search API.
Расширение для веб-конструкторов
Теперь мы реализовали расширение TAPe RVS API для конструкторов веб-сайтов, чтобы поиск по видео стал более доступным для миллионов пользователей по всему миру.
Telegram бот
Для тестирования видеопоисковой системы с обратным поиском мы разработали телеграм-бота, вы можете попробовать его здесь.
Что дальше
Семантическое ядро: создание подборки видео по запросу пользователя
Используя TAPe, наше приложение может создавать подборку видео по запросу пользователя (семантическое ядро), удалять все дубликаты, группировать фрагменты на основе частоты их воспроизведения, предоставлять ссылки на все видео, использованные в подборке — и делать это автоматически. Вы можете создавать любые типы запросов для любого количества видео, относящихся к любой теме. В будущем мы планируем добавить функцию, которая позволит отслеживать, когда загружаются новые видео, соответствующие вашим критериям, и добавлять их в подборку видео.
Индексация YouTube
Следующим шагом в разработке TAPe RVS будет индексация видео на YouTube. Задача амбициозна, но мы начнём с относительно небольшой: мы хотим проиндексировать самый популярный контент на YouTube — основываясь на статистике, это всего лишь 3% полного видео объёма YouTube, или же более чем 2500 лет видео, экзабайты и петабайты информации. Но, мы уверены, что технология позволит нам проиндексировать такие объёмы видео за короткий промежуток времени.
Мы продолжим улучшать опыт в различных областях - таких как локальная информация, коммерс и научная R&D. Мы также планируем получить фидбек о прототипе от пользователей и компаний, а также привнести лучшее из опыта в TAPe RVS.
Мы продолжим улучшать опыт в различных областях - таких как локальная информация, коммерс и научная R&D. Мы также планируем получить фидбек о прототипе от пользователей и компаний, а также привнести лучшее из опыта в TAPe RVS.
