视频
了解更多
数据经济是一档视频播客系列节目,讲述了那些利用数据对业务、客户和世界产生积极影响的领导者。要查看所有当前剧集,请浏览下面的播客剧集库。
有些组织拥有大数据,有些组织需要实时数据处理,还有一些组织管理着世界上最私密的数据。以下是您可以从益博睿 (Experian) 这家面临所有这三种数据挑战的公司中学到的东西。
大数据有多大?实时数据处理有多快?数据驱动型组织在应对业务风险或寻求新机遇时,需要多么智能和创新?益博睿 (Experian) 身份、欺诈和数据实验室执行副总裁兼总经理 Eric Haller 在数据经济的第一集节目中分享了商业和技术见解。该播客由 Redis 呈现,由 CXOTalk 的 Michael Krigsman 主持。如果您不了解益博睿 (Experian),那他们很可能对您有所了解。他们是美国三大征信机构之一,业务遍及 40 多个国家,拥有超过 18,000 名员工。
在益博睿 (Experian),Eric 负责监督用于识别发生频率低于 1% 的欺诈性交易的检测算法。对于大多数交易,益博睿 (Experian) 必须提供快速响应,以最大程度地减少对客户体验的影响。响应速度有多快?在零售领域,欺诈检测算法必须在 200 毫秒内响应,对于某些用例,甚至在 40 毫秒内响应。换句话说,非常快!
Eric 还负责监督数据实验室 (DataLabs),这是益博睿 (Experian) 的研发团队,负责分析其四个实验室中超过 EB 级的数据。一个 EB 相当于一千 PB,或 50,000 年 DVD 画质的视频——换句话说,这是非常大的数据。
Eric 还提醒听众益博睿 (Experian) 在数据处理方面面临的挑战。他说:“除非我们完全确信存在重大风险,否则我们不想阻止交易,大多数情况下,顺利的流程就是成功购买。”
但另一方面,Eric 承认,“你看不见的数据通常会让你措手不及。”
因此,益博睿 (Experian) 一直在寻找新的数据源、值得考虑的信号、机器学习特性和算法改进,以提升准确性、性能、交易类型或提供服务区域等因素。
事实上,Eric 分享了益博睿 (Experian) 如何研究 COVID-19 经济影响的故事。在美国,挑战在于找到表明当地疫情爆发的正确信号,例如购买止咳糖浆的人数激增。对于其他热点地区,如巴西,该公司与联合国、世界卫生组织、微软、亚马逊以及芝加哥大学等教育机构合作,汇总新数据以追踪病毒传播。Eric 传达了益博睿 (Experian) 的企业文化理念:“世界现在需要帮助,我们应该尽自己的一份力量。”
Eric 在播客中分享了两个经验教训。他说:“让数据告诉你如何解决问题”,并承认益博睿 (Experian) 拥有强大的才能、基础设施和经验,能够为全球和社会的福祉应对挑战和抓住机遇。对于其他公司,他建议:“准备好与许多拥有相同梦想和愿景的其他利益相关者合作。”

现在很难想象,但就在 10 年前,聚合和管理超大数据集以及处理用于实时决策的超高速、高容量数据流仍然极具挑战性。大多数公司才刚刚开始迁移到云端,用于集中数据的工具很少,在 SOA 实施方面举步维艰,并且自行开发了大量技术支架。
如今,组织正在处理时间序列数据,对JSON 文档执行全文搜索,并构建采用无数据库架构的应用。技术领导者认识到使用强大的多模型数据平台简化应用开发以及在全球范围内扩展同时保持本地响应时间的重要性。
Eric 在播客中分享了关于益博睿 (Experian) 架构的见解,以及他对优化多云架构、利用图数据库和集中管理多业务单元数据源的看法。他还讨论了信息安全、满足法规要求以及益博睿 (Experian) 为确保数据科学家合规而要求的培训。
但尽管面临所有技术和合规挑战,解决这些问题并不是公司的主要目标。Eric 分享了他的秘诀:“你会很想放开手脚,在数据集上尽情探索,看看能得出什么结果,但如果你那样做,你可能会找到大海捞针般百万分之一的发现。通过追逐一个特定的问题来解决,你更有可能找到成功的方法。”
对于开发人员、数据科学家和工程师来说,这是一个很好的建议,他们应该首先专注于解决业务问题和挑战,然后寻求能够实现高效技术实施的技术合作伙伴、商业解决方案和开源选项。

Isaac Sacolick,StarCIO 总裁,是《驱动数字化:通过技术实现业务转型的领导者指南》一书的作者,该书涵盖了许多对成功的数字化转型项目至关重要的实践,如敏捷、DevOps 和数据科学。Sacolick 是公认的顶级社交 CIO,也是 Social, Agile, and Transformation 的长期博主,以及 InfoWorld 的撰稿人。
观看更多数据经济播客剧集。