您应该在变革管理中应用A / B测试吗? - Prosci变革管理

您应该在变革管理中应用A / B测试吗?

我在验证变革管理方法最喜欢用的策略之一是A / B测试。验证的方法是否合适取决于组织规模和变革细节。但是,如果将其有效地应用在正确的情境中,A / B测试可以省下大量费用并采用更好的变革管理方法。

A / B测试是比较两个选项并分析结果的一种方法,您可以根据需求选择最有效的选项。就像营销或解决方案开发在实施之前测试广告投放或软件解决方案的不同变量一样,测试我们的变革管理计划的变量是确定实现高采用率的最佳途径的有用方法。

 

变革管理中的A / B测试元素

要执行此方法,应存在这些关键要素:

1. 明确衡量采用、利用和熟练程度的方法

如果我们要测试一种方法相对于另一种方法,我们需要量化测量,将方法A与方法B进行比较。这种数据驱动的方法使组织能够识别出最佳方法。

 

2.发起人和项目团队渴望测试变革策略并等待数据

变革措施会随着时间而变化,我们要让每个措施都实行一段特定时间才来评估结果,以全面性评估。尽管初步数据对我们很有帮助 (例如,我们在方法A中看到认知和渴望得到了立即的改善 ),但我们不会在得出最终结果之前就跳到结论。

 

3.接受不同变革的人愿意及时提供反馈

除硬数据外,我们也重视定性反馈,并希望在试验建立机制接收参与者中的反馈。尽管我们正在测试两种解决方案,但我们最终可能会采用混合解决方案。反馈内容让我们对于要施行哪种变革管理解决方案有更明确的方向。

 

4.受到类似影响,同质群体

A / B测试可用于各种规模的组织,但更容易在受到相似影响人员和群体且地理位置分散的大型组织中应用。主要是受到相似变革影响的群体我们才会测试。这些群体通常由一线员工组成,工作角色在组织中则属于较一致的,例如电话客服、销售代表、IT支持团队等。

 

A / B测试的理由

通常在大型、复杂的组织中,领导者会抵制整个变革策略,即使是高风险的大型变革也是如此。为什么?因为执行这些计划太过昂贵。让人员离开岗位参加培训、沟通交流和参加会降低生产力的会议。如果员工没履行其主要工作职责,客户无法如往常收到服务、产品没如期开发、销售也无法实现。

您可以向领导者展示A / B测试是一项不错的投资。通过实验,我们实质上测试了两种不同的采用途径。高、低成本策略的对照也许很有帮助。又或者是否提供员工工作辅助 (job aids) 与面对面培训选项进行测试。我们甚至可以通过将方法作为要考虑的数据点来衡量员工满意度。A / B 测试可以证明不同发起人的卓越成效。发送电子邮件是否就足够了,还是我们需要管理者在每周会议上提出来沟通?

关键是要了解和衡量一种方法相对于另一种方法的采用更有效率。例如,低成本的策略是否也能让我们有机会接近采用目标,省下的成本是否超过高成本策略所带来的效益?

 

A / B测试的权衡

除了员工的时间外,A / B测试还需要团队的运行时间。您需要完成两种变量的实验,然后承诺评估采用率,还要求解决方案接近完成的程度。在测试策略时,团队必须愿意推迟部署。A / B测试还会产生一些重复的工作,其中一些您最终会省略。这意味着在开始之前,您必须彻底评估A / B测试是否适合您的情况。

以下是一些帮助您评估的问题:

  • 转型工作量有多大?
  • 有多少人/群体受到影响?
  • 群体和影响是相似的还是不同?
  • 有多少地点受到影响?
  • 管理不善的变革的成本和风险是什么?
  • 抵制变革的程度?
  • 您离上线还有多少时间?
  • 发起人和项目团队是否支持A / B测试?

一个表格可用于评估变革管理方法。如果您要测试多种方法,可以添加列和指标。根据数据级别,可以使用统计分析包或工具(如Tableau)可视化。

 

衡量

方法 A (高成本)

方法 B (低成本)
采用率 77% 68%
采用速度 11天 17天
采用率 89% 78%
熟练程度百分比 95% 91%
每位用户采用的费用 $27 $12
每位用户的培训时间 1小时

没有正规培训 (提供工作辅助)

尽管此简化示例说明方法A获得了更高的采用率、熟练度和利用率,但方法B的每位用户成本却大大降低。方法B中的费率实际上可以达成您目标的采用和使用率。与您的发起人和项目团队合作评估,有助于您了解要采用哪种方法。此外,也可以帮助确定最佳的混合解决方案。

 

A / B测试为变革带来的好处

为什么有人会愿意这么做?因为在大型组织中,时间是他们最昂贵的单行项目。如果我们可以缩短几个小时的采用的时间,就可以为大型组织节省大量费用。如果我们采用更好的采用途径,那么我们也会看到对员工的好处。帮助人员通过变革是最主要的理由。

 



 

翻译自: SHOULD YOU APPLY A / B TESTING IN CHANGE MANAGEMENT?