Приближается сезон «Доказательства концепции»

Три признака того, что ваш поставщик кибербезопасности может обмануть систему

Приближается сезон подтверждения концепции
Для тех из вас, кто посетил RSA Conference Я уверен, что в апреле продолжается бомбардировка электронными письмами поставщиков, телефонными звонками и приглашениями на встречи в LinkedIn. Хотя я готов поспорить, что многие поставщики, просящие о встречах, предлагают продукты или услуги, которые не находятся в вашем поле зрения в 2023-2024 годах, вероятно, есть несколько, которых вы хотели бы протестировать, чтобы увидеть, смогут ли они обеспечить лучшие результаты, чем что вы сейчас используете. Для этих поставщиков после обязательной вводной встречи, некоторого технического обсуждения или даже телефонного разговора с клиентом вам будет предложено подтверждение концепции (иногда его также называют доказательством ценности). Эта проверенная временем традиция позволяет «Протестируйте продукт сами».  

Во время PoC поставщик пытается показать вам, как его продукт предотвращает больше атак, обнаруживает больше фишинговых писем, обнаруживает больше вредоносных веб-сайтов и т. д., чтобы подтвердить свои маркетинговые заявления. Намерение предложить PoC имеет смысл и должно помочь покупателям избежать покупки продуктов с возможностью перепроданности. Но, к сожалению, слишком часто продукты, которые, казалось бы, хорошо себя зарекомендовали во время PoC, не дают аналогичных результатов после полного развертывания в среде покупателя. 

Как такое возможно? За почти 20 лет работы в сфере разработки, продажи и маркетинга продуктов в области кибербезопасности я видел практически все способы, которыми поставщики пытаются обмануть разработчиков в рамках этих пилотных проектов. Вот три признака того, что ваш пилотный проект может быть не совсем честным.

 

«Мы предоставляем все данные в нашей среде, поэтому вам не о чем беспокоиться».

Дело в том, что тщательное тестирование продуктов кибербезопасности , использующих внешние угрозы или огромные объемы внутренних данных для обучения моделей машинного обучения, может быть обременительным. Поскольку ни один специалист по безопасности не согласится и не должен соглашаться тестировать неизвестный продукт в своей производственной среде, ему потребуется достаточно надежная тестовая среда для проверки этого нового продукта. Учитывая это требование, может возникнуть соблазн принять предложение поставщика провести тестирование, используя его данные в среде поставщика. Если подумать, это все равно что просить студентов написать вопросы для своего выпускного экзамена. Не кажется ли вам, что тестирование в среде поставщика с использованием его данных может исказить результаты в его пользу? Конечно. Хотя никто не хочет, чтобы проверка концепции занимала больше времени, чем хоккейный сезон НХЛ, вам все равно потребуется предоставить данные для надлежащей проверки продукта. Некоторые поставщики могут предложить использовать инструменты, имитирующие атаки, что разумно, если у вас, как у потенциального клиента, есть выбор — использовать их или нет. Лучший способ сократить продолжительность проверки концепции — выбрать максимум два-три целевых сценария использования и предоставить необходимые данные только для этих сценариев. В идеале, тестируемые продукты должны обеспечивать простую интеграцию продуктов, генерирующих данные, в вашу среду.

 

«Какую версию мы тестируем? Это во многом наш продукт GA. Вы не заметите разницу».

Когда я пришел в индустрию кибербезопасности и готовился к PoC, мы попросили потенциальных клиентов установить сервер, отвечающий нашим минимальным требованиям. Затем я вручную устанавливал продукт на машину, чтобы участники PoC могли видеть, какую версию продукта мы собираемся использовать для тестирования. 

В современном мире, где SaaS является стандартом, знание версии тестируемого продукта может показаться путешествием в червоточину. К сожалению, я слышал ужасные истории от практиков, когда они были в PoC с поставщиком, и результаты были выдающимися, поэтому они заключили контракт на покупку продукта. Перенесемся на месяц или два вперед, и специалисты и руководство будут крайне разочарованы. Продукт, установленный в их среде, совсем не похож на то, что они тестировали. Функции отсутствуют, интеграций, которые они использовали, нигде не найти, а поставщик говорит: «Эта версия должна скоро выйти». В некоторых случаях я не вижу проблем с использованием невыпущенной версии продукта для PoC, если поставщик прозрачен для потенциального клиента. К сожалению, когда клиент чувствует, что поставщик пытается что-то от него скрыть, отношения между клиентом и поставщиком, которые должны быть совместными, могут мгновенно стать враждебными. 

 

«Мы ни разу не пропустили угрозу во время PoC».

В 1941 году Тед Уильямс, также известный как «Великолепный Осколок» , провел волшебный сезон на бите, завершив его в составе «Бостон Ред Сокс» с потрясающим средним показателем отбивания .406 и процентом попадания на базу .553. Многие историки бейсбола утверждают, что Тед Уильямс был самым чистым бэттером в истории игры. На сегодняшний день ни один бэттер в Американской или Национальной лиге не превзошел средний показатель .400 за год. Так какое же отношение Тед Уильямс имеет к блогу о доказательствах эффективности в области кибербезопасности? Суть в том, что ничто, будь то продукт кибербезопасности или лучший бэттер в истории игры, не бывает идеальным. Можно ли протестировать продукт на определенном наборе угроз, и чтобы он выявил их все? Безусловно. Сможет ли он сделать это последовательно с новыми угрозами в течение двух дней, 5, 10 или даже 100 дней? Но я точно знаю, что в сезоне 1941 года Тед Уильямс 27 раз выбыл из игры из-за страйк-аута, и что обязательно настанет день, когда ваш новый, блестящий продукт для кибербезопасности пропустит угрозу, которую, как вы думали, он должен был обнаружить.

Если во время PoC необработанные результаты тестирования продукта не будут доступны немедленно или вы заметите людей от поставщика, работающих над проектом, с которыми вы никогда не встречались, будьте осторожны. Вы являетесь свидетелем того, как отдел продаж обращается за помощью к разработчикам, исследователям угроз или инженерам-программистам, работающим над вашим развертыванием, и пытается выяснить, почему они пропускают угрозы или какая-то функция не работает. Опять же, могут ли дефекты программного обеспечения выявиться во время PoC? Абсолютно. Когда они это сделают, наверняка, вы сможете найти разработчиков и инженеров, отлаживающих код вживую. Ключевым моментом здесь является прозрачность. Этические поставщики будут откровенны с вами, если и когда обнаружится дефект. Они также объяснят, почему во время PoC была пропущена угроза (если таковая имеется). Помните, что при запуске PoC продукта вам следует сравнивать результаты с тем, что вы используете в настоящее время, и с другими продуктами, которые вы тестируете, а не с мифической системой, которая постоянно обнаруживает 100% угроз. Вы ищете значительно лучших результатов, а не совершенства. 

 

PoC для людей

Поскольку на рынке представлено так много продуктов, претендующих на схожие возможности, преимущества и результаты, практически невозможно определить, что подойдет вам лучше всего, не запуская PoC. Поэтому я являюсь поклонником PoC, поскольку при честном использовании он дает конкурирующим продуктам шанс конкурировать в реальном мире. 

Пусть победит лучший продукт.

Наверх