前一段,一位前字节员工在文章中分享了在字节学习到的方法论,其中提到,早期有个团队策划了一波线下广告投放,之后团队汇报说这个广告效果很好,张一鸣就问:怎么评价效果好?有什么数据能证明效果好?比如XX指数涨了吗?那么,怎么评价效果好,有什么数据能证明效果好呢?我们不妨看看字节和其他大厂是怎么做的,以及这些做法和思路对出海品牌的海外增长有哪些正面价值。
用事实和数据说话
字节很早就建了统一的数据平台。张一鸣会强调一个观点:各个部门不要自定义数据,不要在汇报的时候自己截取定义某种数据,来证明某个事做的效果好,最好全部统一口径,比如都看留存,都看时长。
那么,如何得到最准确的数据、不断优化产品?字节经常使用的方法是做A/B测试。例如,字节开A/B测试,每天新增的10w用户,随机分成两组,每组5w用户,测试发现,新用户安装时要浏览记录不会降低新用户激活率,用户不会因为多要了这个权限不安装APP,但要浏览记录也不会提高推荐效果,对APP次日留存率也没有正向影响。多项类似的测试直接影响了字节的产品设计和策略。
不仅是字节,在国内外很多大厂,A/B测试都是获得真实数据和实际判断的重要手段。这些大厂利用数据与事实为导向的增长策略取得了成功。他们的成功做法可以应用到品牌出海中吗?当然是可以的,而且已经有很多出海品牌在使用并从中受益
什么是AB测试,有什么好处
A/B测试是一种随机测试,可以用来测试某一个变量两个不同版本的差异,A为测试对照版本,测试人群对于A和B的反应差异,再判断A和B的方式何者较佳。在实际应用中,有时还会用到A/B/n测试,即对两种以上的变体进行测试。
用事实说话、快速发现和验证是A/B测试最重要的特点和优势所在。A/B测试提供了最接近事实情况的数据,从而帮助企业获得更好的选择、判断和决策的依据,而所付出的成本和时间代价都较低,避免了因为长时间执行不佳的决策而贻误商机。
用数据取代主观,找到更优解
对同一个问题,每个人都会从自己已有的经验和认知做出判断,每个人的观点很可能不一致,各有道理,这个时候怎么解决?
这种情况下最好用数据来说话,用客观数据来代替主观判断。通过测试,可以简单评判出不同方案的优劣顺序,不仅能减少讨论的时间,也能避免执行非最优决策很久后,实际成效仍不理想的后果。
数据回馈更直接
A/B测试所选用的指标更加直接和明确,如点击率、转换率、跳出率、留存率等等,都非常直接,相关人员和决策者可直观看到不同方案的实际成效,而不必花费过多精力进行复杂分析。
降低测试成本
A/B测试的方案优劣是相互比较而成,因此需求的数据量较其他分析方法更少,少量数据即能得到基础测试结果,相比大数据分析和调研,A/B测试更为经济,更易获得所需的结论。
在拟定营销策略与测试市场反应时,采用A/B测试能最大限度以品牌现有流量进行测试,而不必再付出高昂的成本。
可持续调整测试
由于A/B测试的成本更低,也更易于操作,因此可以不断进行测试。通过持续修改、调整及测试,找出当前最佳的方案与元素组合,能让产品和营销策略借A/B测试逐步优化,达到更优。
对使用者体验的影响较小A/B测试是在使用者不知情的情况下进行,因此可以把对用户或受众体验的影响降低到最小,减少使用者对于被测试的抵触,取得更为可靠的数据。
A/B测试的使用场景
A/B测试广泛应用于广告系统、用户增长、数字化运营、智能营销、数据分析、推荐系统、互联网产品、设计、搜索等领域。互联网从业者如产品、运营、设计、市场、营销、前端、后端、数据、算法、管理者等都可以将A/B测试的方法应用于自己的工作中,真正建立数据思维。
对出海品牌来说,无论是开展B2B营销还是B2C营销,都可以进行A/B 测试以优化产品和营销策略。
进行海外社媒的数字广告投放时,A/B 测试经常被使用。借助A/B 测试,能够快速判定影响广告内容及投放的因素,从中找出最能提升效果的素材、方式与组合,轻松省下额外投放广告的费用。
不仅如此,出海品牌还可以采用类似A/B 测试的方式测试不同海外社媒平台、不同国家和地区、不同语言、不同市场的增长及反馈,以及进行营销内容的不同风格、类型、素材的选择和判定。
如何实施
实施A/B测试的基本流程主要包括以下几部分:
1、分析现状,确定最高优先级的改进点,作出假设,提出优化建议;
2、设置主要指标来衡量版本的优劣(例如帖文内容可以将千粉互动作为指标);设置辅助指标来评估其他影响;
3、创建待测试的A版本和B版本;
4、确定测试持续的时长,测试时长不宜过短,否则参与进来的可能会过于集中在高频用户;
5、确定测试对象,每个测试版本的分流比例及其他分流细节;
6、收集测试数据;
7、分析数据,进行有效性和效果判断,得出结论,做出判定和决策;或者调整测试方案后继续测试。
在进行海外社媒的A/B测试时,可以充分利用数据管理工具。OneSight营销云的帖文发布功能,可以在一键登录后将内容发布到X、LinkedIn等平台,节省了进行测试时将同一内容发布到不同平台以及发布多个内容时频繁切换帐号的繁琐。

测试帖文发布后,可以对帖文进行实时监控,给测试者进行效果判定提供了更多动态参考:

利用社交号对比功能,可以对不同社交号的粉丝增长、帖文互动等数据及趋势进行对比,辅助对相关社媒测试项目的评判。
结语
在海外社媒运营中,经验很重要,但更重要的,是要用数据和事实来说话、做判断和做决策。通过A/B测试能低成本的取得有效且直接的数据,并能针对很多项目和细节随时进行修正并持续测试,对于产品和营销策略管理与优化有莫大助益。
作为数据驱动的重要手段,A/B测试重在应用和实践,只有持续和多次测试,才有可能以更小的代价获得更优的方案,并给用户带来更好的体验。
本文所有数据均来自公开数据,数据获取和分析工具来自OneSight营销云,仅供示例。关注OneSight,我们会持续通过SaaS产品以及不断推出的好内容为出海品牌添风助力、保驾护航。