Результат – 57 % роста по сравнению с контрольной группой – выглядел убедительно, однако мы задали себе обычный в таких случаях контрольный вопрос: «Есть ли другая причина, способная столь же правдоподобно объяснить данный прирост?» К нашему сожалению, таковая была.

Рис. А. 2. Сомнительное исследование с контрольной группой

Отделение было создано совсем недавно, всего за четыре месяца до начала обучения СПИН. Средний цикл продажи данного спектра продуктов составлял три месяца. То есть увеличение продуктивности вполне могло быть вызвано тем, что истекло время, необходимое новому отделению, чтобы набрать темп, а также отсроченным окончанием трехмесячного цикла продажи. Наше «доказательство» вновь лопнуло как мыльный пузырь.

Наше досье пестрит подобными примерами оценочных исследований, которые выглядят вполне убедительными, но не выдерживают тщательной проверки. Вот еще один случай, подтверждающий это (рис. А. 3). Крупная компания, занимавшаяся оргтехникой, решила оценить методы СПИН на сезонном рынке, где февраль – самый прибыльный месяц.

Рис. А. 3. Увеличение продуктивности отделения, обученного технике СПИН, по сравнению с четырьмя контрольными группами

Дабы компенсировать воздействие сезонности и рынка, компания в качестве контрольных групп взяла каждое отделение, работавшее на том же рынке. Отслеживалось количество заказов у каждого отделения до и после тренинга в экспериментальном отделении, прошедшего в начале января. Как вы видите, отделение, обученное технике СПИН, показало великолепный рост продуктивности по сравнению с остальными. На этот раз все пять отделений открылись достаточно давно, так что проблемы с циклом продаж или с кривой обучения отсутствовали. Может ли это служить доказательством, которое мы искали? К сожалению, нет.

В ноябре в филиале сменился управляющий. Как мы можем быть уверены, что резкое повышение продуктивности было вызвано использованием модели СПИН, а не новой системой управления продажами, внедренной в декабре? Риторический вопрос. Тем не менее компания попыталась ответить на него, проведя опрос среди всех участвовавших в тренинге продавцов. Каждого из них просили оценить, в какой мере изменения были обусловлены обучением СПИН и насколько – другими причинами. Хотя каждый продавец дал свою оценку, тот факт, что большинство ответов гласили: «На 50 % благодаря СПИН», вызвал у меня подозрение. Я больше склонен считать, что респонденты затруднялись с ответом.

Провал за провалом

Невозможно в ходе эксперимента полностью устранить воздействие прочих организационных и рыночных факторов, и это означает необычайную сложность получения убедительных доказательств для любой модели продаж. Мы старались как могли: наш ли организацию, согласившуюся не менять продукты, управление или продавцов в течение всех шести месяцев проведения теста. Какое-то время мы были убеждены, что осуществим оценочное исследование, способное выдержать самую жесткую проверку. Затем, в начале третьего месяца проведения эксперимента, презренная конкуренция сбила цены на 15 %. Наш клиент, вынужденный быстро реагировать, изменил цены, сменил людей и продукты. Еще один провалившийся тест!

Мы думали, что наконец можем контролировать необходимые факторы в одной высокотехнологичной компании. Тесто вое отделение отлично функционировало – с результатом на 73 % выше, чем в контрольных отделениях, – и мы были уверены, что на этот раз победим. Однако в середине пути мы па ли жертвой управляющего одного из отделений контрольной группы. До начала теста его отделение было лучшим и потому являлось предметом его гордости. Теперь же, видя, что показатели экспериментального отделения намного превосходят таковые его отделения, он решил принять меры. Глубокой ночью он поднял архивы учебного отдела и скопировал все материалы о программе, использованные нами в экспериментальном отделении. Взяв со своих сотрудников клятву хранить тайну, он начал самостоятельно обучать их по украденным материалам.

Это погубило наш тест. В тот мо мент я был взбешен поступком честолюбивого наглеца, но теперь готов признать, что результат этого исследования был самым убедительным доказательством эффективности модели СПИН: чтобы украсть наши разработки, менеджер по продажам проехал за ночь 600 миль.

Возможно ли получить доказательство?