На прошлой неделе мне посчастливилось принять участие в финале конкурса стартапов, организованного Олег Мосяж в сотрудничестве с «Предприятия» Дарьи Кук. В этом событии было все, на что только мог надеяться основатель или инвестор: сильный состав стартапов, хорошая репутация, прекрасная площадка и жюри мирового уровня.
Но я пришёл сюда не только для того, чтобы смотреть или судить.
Я пришел с другой целью: протестируйте наш инструмент VC Analyst на базе искусственного интеллекта PitchBob в реальной среде с высокими ставками. В частности, мне хотелось узнать, как оцениваются преимущества нашего инструмента по сравнению с реальными решениями, принятыми опытными венчурными инвесторами.
Спойлер: результаты открыли глаза.
Почему мы это сделали
Оценивать стартапы сложно, особенно масштабно. Каждую неделю акселераторы, венчурные капиталисты, ангелы и корпорации получают сотни колод. Большинство решений основывается на быстром сканировании или интуиции. Это оставляет много места для предвзятости, непоследовательности и упущенных возможностей.
Наша миссия в PitchBob заключается в демократизировать структурированную и качественную обратную связь, используя искусственный интеллект для моделирования мыслительного процесса венчурного аналитика. Это событие дало нам уникальную возможность:
- Сравните наши оценки ИИ с решениями, принятыми человеческими инвесторами
- Узнайте, как сценическое исполнение соответствует (или нет) представленным колодам
- Узнайте, как основатели по-разному представляют себя в письменной и живой форме
Как работал эксперимент
Мы сотрудничали с организаторами для анализа каждая питч-дека представленные на конкурс — как от первых претендентов, так и от 10 финалистов. С помощью нашего инструмента на базе искусственного интеллекта каждая колода оценивалась по 11 основным критериям в стиле VC, таким как:
- Подходящая проблема/решение
- Размер рынка и рост
- Сила команды
- Бизнес-модель
- Конкурентное преимущество
- Стратегия выхода на рынок
- Тяговое усилие и ключевые показатели эффективности
- Потенциал выхода
Каждая колода была оценена по шкале от 0 до 100, и мы получили:
- Структурированный инвестиционный меморандум
- Резюме
- Плюсы и минусы этой возможности
- Оповещения о красных флаж
- Персонализированные сообщения обратной связи
Цель состояла не в том, чтобы выбрать победителей, а в том, чтобы наблюдать за закономерностями и посмотрите, как наш анализ искусственного интеллекта сравнивается с реальными решениями, принятыми жюри после выступлений в прямом эфире.
Три лучших стартапа PitchBob
Согласно нашей оценке ИИ, лучшие колоды оказались следующими:
- IMMA Health — 81
- Обратный искусственный интеллект — 80
- Сенецио — 79
Эти команды выделялись по следующим показателям:
- Четкая, четко сформулированная проблема и решение
- Логическая структура и визуальная четкость
- Сильные команды с опытом работы в предметной области
- Надежные подходы к выходу на рынок и раннее продвижение
Мы намеренно не повлияли на жюри и не обсудили результаты ИИ заранее.
И жюри ответило...
После просмотра презентаций в прямом эфире жюри наградило стартапы следующим образом:
- Лучший продукт — Сенецио
- Лучшее сцепление — Проект «Пульс»
- Лучшая команда — IMMA Health
- Лучшая модель искусственного интеллекта — Свет искусственного интеллекта
Было сильное выравнивание между результатами искусственного интеллекта и человеческими суждениями в самых высоких категориях — особенно для Сенецио а также IMMA Health, которые получили высокие оценки в обоих случаях.
Один сюрприз: Обратный искусственный интеллект, наш #2, не получил награды жюри — возможно, из-за различий в выступлениях команды в прямом эфире или из-за более субъективных предпочтений судей.
В чем разница между оценками человека и ИИ
Были также случаи, когда результаты искусственного интеллекта и жюри различались. Например, Свет искусственного интеллекта, получившая награду жюри в номинации «Лучшая модель искусственного интеллекта», получила более низкую оценку от нашего инструмента. Почему?
С точки зрения нашего искусственного интеллекта:
- В колоде отсутствовала четкость плана выхода на рынок
- Бизнес-модель была недостаточно разработана
- Некоторые ключевые показатели отсутствовали или были расплывчаты
Это привело к скромной общей оценке, хотя сама технология, возможно, поразила жюри вживую.
Этот пробел подчеркивает одну из наших ключевых гипотез:
Основатели часто «перепродают» на сцене и «недопродают» свои колоды.
Другими словами, присланная по электронной почте колода может быть более честной версией стартапа — тот, которому не хватает харизмы, но который показывает реальный уровень зрелости.
Чему мы научились
1. Корреляция существует
Оценки, полученные искусственным интеллектом, действительно совпадают с оценками опытных инвесторов.
Это подтверждает логику, лежащую в основе модели, и ее способность выявлять перспективные стартапы без предвзятости со стороны человека.
2. Поле: колода
То, что на сцене, часто отличается от того, что изображено на слайдах. Колоды — это статичный документ, но в них воплощены четкость и умение основателя планировать. Напротив, живые выступления отражают энергию, повествование и уверенность в себе.
3. Анализ в реальном времени = анализ в реальном времени
Использование PitchBob в прямом эфире во время мероприятия упростило проверку предположений, составление дополнительных вопросов и быстрое выявление сильных сторон и недостатков.
Сейчас мы работаем над «Умный генератор последующих подсказок» который подскажет вам разумные вопросы, основанные на том, чего не хватает или что слабо в колоде.
Реакция основателей
После мероприятия несколько основателей стартапов обратились к нам за оценками и отзывами на PitchBob. Один из них сказал:
«Такой структурированной обратной связи мы никогда не получаем от венчурных капиталистов. Обычно это просто молчание или одно расплывчатое предложение».
Другой добавил:
«Я не понимал, насколько неясна наша стратегия GTM, пока не увидел, что искусственный интеллект сломался. Мы обязательно исправим эту проблему до следующего раунда».
Это именно то влияние, к которому мы стремимся.
Что дальше: новые функции и варианты использования
На основе этого живого теста мы уже работаем над несколькими обновлениями:
- Живое поле против «Дельты колод»: Функция, позволяющая сравнивать колоду, отправленную по электронной почте, с презентацией (или стенограммой) на сцене для оценки согласованности сообщений.
- «Оценка доверия»: Чтобы подчеркнуть, насколько убедителен и последователен рассказ основателя в разных каналах.
- Умный генератор последующих действий: Предложение ключевых вопросов в стиле инвестора, которые следует задать после просмотра колоды.
- Панели управления демонстрационным днем в режиме реального времени: Таким образом, акселераторы и венчурные капиталисты могут отслеживать результаты стартапов в режиме реального времени во время демонстрационных дней.
- Публичные табло и голосование: Для получения отзывов от сообщества на питч-конкурсах.
Мы также расширяем наши партнерские отношения с ускорители, университеты, и корпоративные венчурные подразделения которым нужна вторая пара глаз — или сотни — для оценки выступлений и тренировок.
Попробуй сам
Если вы просматриваете десятки питч-колод в месяц и хотите быстрее и структурированнее расставлять приоритеты и оставлять отзывы — PitchBob всегда готов помочь.
Мы все еще в открытая бета-версия, предлагая бесплатные оценки на срок до 10 колод.
Протестируйте здесь.
Последняя мысль
Искусственный интеллект здесь не для того, чтобы заменить инвесторов, а для того, чтобы заменить дополнить их.
То, что мы увидели на этом мероприятии, — это только начало: такие инструменты, как PitchBob, могут принести вам пользу скорость, четкость и структура к процессу, который часто носит хаотичный, противоречивый и предвзятый характер.
Если вы строите будущее, оцениваете будущее или просто пытаетесь не отставать от входящей почты, полной колод — давайте поговорим.