Сьогодні багато інструментів штучного інтелекту можуть переглядати відео та узагальнювати те, що відбувається, але все стає трохи складніше, коли ви ставите моделям запитання про кілька відео або про багатогодинний відзнятий матеріал.
Це велике обмеження для охоронних компаній, які хочуть використовувати ШІ для аналізу тисяч годин відеозаписів з різних камер, а також для маркетингових компаній, які хочуть вивчати різні відеокампанії та зйомки продуктів.
Memories.ai хоче вирішити цю проблему за допомогою своєї ШІ-платформи, яка може обробляти до 10 мільйонів годин відео. Для компаній, які мають багато відео для аналізу, стартап хоче надати контекстний рівень з можливістю пошуку, індексації, тегування, сегментації та агрегації.
Його співзасновник, доктор Шон Шен, був науковим співробітником лабораторії реальності Meta під час здобуття ступеня доктора філософії, а його колега Енмін (Бен) Чжоу працював у Meta інженером з машинного навчання.
“Усі провідні AI-компанії, такі як Google, OpenAI та Meta, зосереджені на створенні наскрізних моделей. Ці можливості хороші, але ці моделі часто мають обмеження щодо розуміння контексту відео за межами однієї-двох годин, – сказав Шен в інтерв’ю TechCrunch.
“Але коли людина використовує візуальну пам’ять, ми просіюємо великий контекст даних. Ми були натхненні цим і хотіли створити рішення для кращого розуміння багатогодинного відео”, – сказав він.
Для досягнення цієї мети компанія зібрала 8 мільйонів доларів у раунді посівного фінансування під керівництвом Susa Ventures та за участі Samsung Next, Fusion Fund, Crane Ventures, Seedcamp і Creator Ventures. Шен сказав, що спочатку компанія планувала зібрати 4 мільйони доларів, але в підсумку отримала більше підписок на раунд через інтерес інвесторів.
“Шен – високотехнологічний засновник, і він одержимий ідеєю розширити межі розуміння відео та інтелекту, – сказав Міша Гордон-Роу, партнер Susa Ventures. “Завдяки своєму рішенню Memories.ai може розблокувати багато сторонніх даних візуального інтелекту. Ми відчули, що на ринку існує прогалина у сфері довготривалого контекстного візуального інтелекту, що й спонукало нас інвестувати в компанію”, – додав він.
У Samsung Next була дещо інша теза: інвестиційний підрозділ Samsung бачить рішення Memories.ai корисним для споживачів.
“Одна з речей, яка нам сподобалася в Memories.ai, – це те, що вона може виконувати багато обчислень на пристрої. Це означає, що вам не обов’язково зберігати відеодані в хмарі. Це може відкрити кращі програми безпеки для людей, які побоюються встановлювати камери спостереження в своїх будинках через побоювання за конфіденційність”, – сказав Сем Кемпбелл, партнер Samsung Next.
Memories.ai каже, що використовує власний технологічний стек і моделі для проведення аналізу. По-перше, він видаляє шум з відео і пропускає вихідні дані через шар стиснення, щоб зберегти лише важливі дані. Далі йде рівень індексування, який робить відеодані доступними для пошуку (за допомогою запитів на природній мові) за допомогою сегментації та тегів. Існує також рівень агрегації, який узагальнює дані з індексу, допомагаючи створювати звіти.
Наразі стартап обслуговує два типи компаній: маркетингові та безпекові. Маркетингові компанії можуть використовувати інструменти стартапу, щоб відстежувати тенденції, пов’язані з їхніми брендами в соціальних мережах, і визначати, яке відео вони хочуть зробити. Memories.ai також надає маркетологам інструменти для створення таких відео.
Компанія також співпрацює з охоронними компаніями, допомагаючи їм аналізувати відеозаписи з камер спостереження, щоб визначити потенційно небезпечні дії людей на відео, міркуючи за шаблонами.
Наразі компанії, які працюють з Memories.ai, повинні завантажити свою відеотеку на платформу, щоб вона могла аналізувати кліпи. Але Шен каже, що в майбутньому його клієнти зможуть створювати спільний диск і легше синхронізувати контент. План полягає в тому, щоб дозволити клієнтам ставити запитання на кшталт: “Розкажіть мені все про людей, у яких я брав інтерв’ю за останній тиждень”.
Шен бачить помічника зі штучним інтелектом, який може отримувати інформацію про життя користувача з його фотографій або коли він активує “розумні” окуляри. Він також бачить, що ця технологія відіграє важливу роль у навчанні людиноподібних роботів виконувати складні завдання або допомагати самокерованим автомобілям запам’ятовувати різні маршрути.
Наразі в компанії працює 15 осіб, і вона планує використати фонд для розширення команди та покращення пошуку.
Memories.ai конкурує зі схожими стартапами, такими як mem0 і Letta, які працюють над створенням шару пам’яті для ШІ-моделей, хоча наразі вони пропонують обмежену підтримку відео. Їй також доводиться конкурувати з такими компаніями, як TwelveLabs і Google, які працюють над тим, щоб допомогти ШІ-моделям розуміти відео.
Однак Шен вважає, що рішення його компанії є більш горизонтальним, що дозволить їй працювати з різними відеомоделями.
