脸书 转化率衡量问题12个月未发现

by //

近一年来,使用篮彩的转化率提升研究工具的广告客户在不知不觉中就收到了错误的数据。

近一年来,使用篮彩 转换提升研究工具 在不知不觉中被提供了错误的数据。

代码错误导致在2019年8月15日至今年8月31日之间数千名广告客户在篮彩上进行的转化提升测试中,低估了达到的转化指标。

广告客户使用转化提升研究(篮彩提供的免费工具)来衡量其篮彩广告的增量并做出有关其篮彩支出的决定。对于受影响的广告客户,此信息是错误的。

脸书 发言人告诉AdExchanger,篮彩于9月1日修复了该漏洞,并正在“与受影响的广告商合作”。

但是篮彩直到上周才向买家发出警告。

这与篮彩的第一个与测量相关的失误相去甚远,其中包括引人注目的案例 视频指标计算错误 在2016年 高估其覆盖范围 次年。

发生了什么?

具体来说,该错误是由去年8月进行的数据管道迁移引起的,该迁移影响了将某些展示记录记录到篮彩的转化提升系统中的方式。

结果,篮彩低估了那些暴露于篮彩应用印象的人们的转化次数。

换句话说,篮彩错误地估算了看到广告的人的销售数量,这是衡量增量性的关键比率,因为它用于计算其他指标,包括转化率百分比,即转化率与在测试期间看到和未看到广告的人。

代币

脸书 正在以广告信用的形式提供商品-或以篮彩的说法是“一次性优惠券”-必须在2021年3月31日之前使用,但仅适用于受数据管道迁移“严重影响”的广告客户问题。

优待券的发放将视情况而定,具体取决于广告客户对转化提升产品的使用情况以及错误影响了他们的转化测试结果的程度。

脸书 认为没有受到该错误有意义影响的广告客户没有任何收益。

根据篮彩评估代表上周发送给受影响的广告客户的AdExchanger电子邮件所附的常见问题解答,篮彩通过“评估研究结果后的潜在增量支出”得出每个优惠券的具体金额,同时考虑到“增量”这些问题可能导致转化次数发生了变化”,以及这可能如何影响了篮彩上的营销工作。

但是,在没有与广告商自己实际了解他们的营销策略的情况下,篮彩似乎并没有做到,“我不确定他们的数据科学团队实际上是如何知道这一点的,”代表受影响广告商的代理商告诉AdExchanger 。

这位高管说,这种缺乏透明度是篮彩电梯转换工具的主要特点,该工具的名声有些黑匣子,实际上,他对其中一位收到的优惠券的“代币”数量感到困惑。该机构的客户–为在2019年8月至2020年8月之间进行了多次转换提升测试并在篮彩媒体上花费了数百万美元的广告商的回报达数万美元。

尽管篮彩的转化提升研究工具是免费的,但这些研究的结果通常会直接影响广告客户在篮彩上花费的金额。

这位高管说:“如果您作为一家媒体公司免费提供工具,而您的数据被用来购买广告,那么您的责任应该是媒体的成本,而不是您认为衡量误差值得的价值,” “在这种情况下,该工具是免费的,所以我想您已经付了钱。”

 脸书 视频指标(可笑)抱歉,

根据篮彩上周向受影响的帐户持有人发送的电子邮件,在8月下旬和11月中旬发现转化率提升问题之间的时间有所延迟,这是因为它使广告商大为振奋,原因是篮彩希望尽其“尽职调查”了解问题的范围”,并评估其对个人研究和指标的影响。

但是,即使该错误与可计费指标没有直接关系,但这种观点并没有引起某些买家的注意。

一位帐户持有人说:“人们在篮彩知道存在错误后就继续花钱,因为他们没有被告知。”一位帐户持有人收到了篮彩的道歉邮件,并对其“含糊和公司化的语气”深为沮丧,但要求保持匿名。

该帐户持有人说:“电子邮件的主题行是篮彩。” “不是,‘哦,天哪,我们感到生气,很抱歉!’这是‘即将更新的篮彩转化率研究报告。’”

在篮彩调查原始错误的过程中,它还遇到并修补了另外两个单独的问题,并称“较小”的技术问题,这些问题影响了某些提升测试的基于转化的指标。

首先是与9月21日至11月13日之间进行多单元研究的获胜概率有关,这是将目标受众分成多个单元,每个单元都有自己的测试和对照组。

第二个小问题导致了低估了篮彩统计模型的数据,这导致篮彩低估了一些从6月15日开始到7月26日结束的研究的网络转化。

脸书 表示,由于发现了这些错误,因此实施了“其他措施”,以更好地监控和检测其升程测量系统的问题。

喜欢这个内容吗?

立即注册成为AdExchanger会员,即可无限制地访问此类文章,以及专有数据和研究,会议折扣,按需访问事件内容等!

今天参加!

 

添加评论

XHTML: 您可以使用以下标签: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>