使用实时数据加速数字化创新

Redis – Splunk

MICHAEL KRIGSMAN：数据如何驱动、实现、赋能数字化转型？我们正在与 Splunk 的产品与技术总裁 Shawn Bice 讨论这个非常重要的话题。在我们开始之前，非常感谢 Redis 使我们的对话成为可能。肖恩，很高兴和你聊天。你今天怎么样？

SHAWN BICE：我很好。谢谢你邀请我。

MICHAEL KRIGSMAN：肖恩，给我们介绍一下 Splunk。

SHAWN BICE：嗯，Splunk 正在帮助世界各地的客户将他们的数据转化为行动。我们在这个行业已经快 20 年了。因此，当您听到有大数据问题的公司时，他们真的需要从这些数据中获得见解，我很高兴有机会与那些每天与这些客户联系的构建者合作，这样他们就可以获取他们的数据，并实际将其转化为可靠的资产。

MICHAEL KRIGSMAN：肖恩，你是 Splunk 的产品和技术总裁。这个角色包含什么？

SHAWN BICE：是的，所以当您想到我组织中的人员时，这包括产品经理。这些人与客户坐下来，真正花时间了解他们的需求。整个工程组织都在这里——从软件设计到构建，再到云中的所有运营。所以基本上 Splunk 的所有产品都由我们的团队构建和运营。

MICHAEL KRIGSMAN：听起来你和你的团队花了很多时间和客户在一起。

SHAWN BICE：哦，是的。是的，不，我们花费——我们所做的一切都从客户的角度出发。所以我们每天都和他们在一起。

MICHAEL KRIGSMAN：肖恩，让我们来谈谈数据和数字化转型。数据并不是什么新鲜事物，但已成为一个非常诱人且流行的话题。是什么导致数据出现在我们现在看到的这个最前沿的位置？

SHAWN BICE：是的，嗯，数据——数据系统已经爆炸式增长。我要说的是，数据已经从对已发生事情的记录，转变为您做出决策所需的最重要的信息。所以，如果你想想过去，当人们想到数据时，通常只是，嘿，这是对某件事的记录。

今天，很多人从很多不同的系统中获得了大量数据。这些企业正在尝试几乎实时地运营。因此，真正发生的事情是，现在数据真正是组织在做出决策时最重要的信息。

MICHAEL KRIGSMAN：您描述了一种转变，即数据从一种记录系统转变为战略性的。您能否详细说明这一点，并融入这种变化的技术方面？

SHAWN BICE：是的。嗯，这种变化的技术方面非常重要。如果你回顾到 70 年代初的数据行业，从 1970 年几乎一直到 2000 年，如果我们问某人他们的数据战略是什么，或者他们用数据做什么，那么大多数人会在关系数据库系统上构建一个应用程序。

所以，几乎你能想到的每种场景都是基于关系数据库构建的。然后，当我们越来越接近 2000 年代时，突然之间，所有新型的数据库都出现了，比如键值系统、时间序列数据库或文档数据库。

今天，dB 引擎跟踪了超过 380 种不同的系统，如果你使用这些作为代理。所以，真正发生的事情是，在将近三十年的时间里，我们曾经拥有这种一刀切的数据库，而今天，它实际上是这些专门为给定的访问模式构建的系统。这就是我们现在所处的世界。

MICHAEL KRIGSMAN：技术的变化是否是这种新型数据使用的驱动因素，还是业务需求创造了它？或者这两者是否协同工作？

SHAWN BICE：它们确实协同工作。但我想告诉你，现在人们尝试用数据做的事情可能更受重视。例如，如果你和我 20 年前正在构建一个应用程序，那么就没有像 Lyft、Uber 或 Netflix 这样的东西。因此，如果你和我正在考虑规模，我们可能会考虑我们的网络，比如我们的企业中有多少用户连接到我们的网络，以及他们所处的环境。这就是规模的范围。

但是今天，你看看他们正在构建的应用程序类型，比如想想 Snapchat。谁知道芝加哥小熊队什么时候会赢得世界大赛，数百万人拿起设备想要自拍？但是，当这种情况发生时，你的基础设施最好准备就绪。因此，今天存在的应用程序类型，它们的可扩展性要强得多。其中许多现在具有全球规模。速度要求非常高。

你今天遇到的人——他们在谈论毫秒级的延迟，而在过去，可能需要几秒钟。你听说过有人拥有来自世界各地的一到数百万用户。所以这种范围，这种规模，实际上是今天构建的许多应用程序背后的原因，它们看起来与 10 年、15 年、20 年前截然不同——支持这种应用程序的技术也在不断发展。

MICHAEL KRIGSMAN：我也足够老了，还记得构建应用程序时，尤其是在创业公司，意味着购买昂贵的服务器和运行这些服务器的人员，而今天，你只需启动一个云实例。

SHAWN BICE：是的，是的。[笑声]我也记得那些日子。是的，我很高兴你提到了这一点，因为今天的世界被称为完全托管的 API。很多人会问，这到底意味着什么？当你想到 10 年、15 年、20 年前，建立一个数据环境是很困难的。你必须获得硬件。

你会堆叠这些机器，配置它们，然后如果你有多个——我的意思是，这是一种没有差异的繁重工作。或者，如果你还记得参加九个月的设计会议，计划你要购买什么——而我们今天所处的世界看起来与此截然不同。

如果你和我有一个想法，随着云计算及其所有美妙特征的出现，云计算中发生的最好的事情之一是，很多服务提供商都提供这些数据库平台，这些平台实际上是完全托管的。所以对你和我来说，这只是一个端点。我们可以连接到它，开始针对它进行编码。我们可以不可避免地扩展它。

如果我们有一个糟糕的想法，需要放弃——没关系。我们没有购买任何东西。所以这是一个巨大的变化。这就是为什么——20 年前，如果有 380 种不同类型的数据库，那就别想了。但这就是为什么今天它存在的原因，因为它们确实只是通过一个简单的 API 暴露出来，而无需管理任何东西。

MICHAEL KRIGSMAN：对业务创新的影响是巨大的，因为它更容易、更快地启动一个实例并拥有你需要的工具，像你描述的数据库一样。

SHAWN BICE: 当然。想想这次疫情。我听过太多客户的故事，大致都是这样的：嘿，情况变了。我们需要以一种非常、非常不同的方式服务客户，而且必须在下个月完成。而疫情之前，同样的项目可能需要一两年。我听过太多公司不得不立即做出改变、重塑自我、创造全新体验的故事，而且他们都在几个月内完成了，这非常了不起。但我还是要指出，他们之所以能够做到这一点，主要还是因为他们拥有非常好的数据基础，并且充分利用了云服务。

MICHAEL KRIGSMAN: 嗯，你没有使用“数字化转型”这个词，但实际上，你说的就是这个。那么数据在数字化转型中扮演什么角色？

SHAWN BICE: 是的，好问题。说实话，我不确定每个人都知道数字化转型是什么意思。有时候我觉得人们听到这些词，并没有认真思考，以至于他们会说：“哦，是的，我完全知道它是什么意思。”他们只是在尝试理解。

我经常用我们都熟知的一个例子来回答这个问题。迪士尼是一家很棒的公司，拥有97年的历史。Disney Plus是老牌企业重塑自我并在不到一年的时间内创造全新客户体验的绝佳例子。

我总是用这个作为例子，因为在Disney Plus之前，如果你对我说，嘿，想象一下周五晚上待在家里看一部大片，你甚至不用去电影院，它会在你的电视上播放，大多数人可能会嘲笑这种想法。但你看看这些服务以及这些公司是如何做到这一点的，这就是数字化转型的一个很好的例子。

数据在其中扮演什么角色？嗯，所有服务质量、比特流传输速度、是否存在延迟、你是否能够正确地跳过章节、你是否在暂停，如果你暂停了，是否能够恢复？音频是否正常播放？想象一下从该系统产生的所有遥测数据，基本上他们只是想确保质量良好。

另一个有趣的数字化转型例子是在一级方程式赛车中。这些赛车已经比赛很长时间了，但如今，这些赛车上安装了300或400个传感器。他们正在收集有关一切的数据，包括引擎、车轮、转向、刹车、加速。他们拥有关于赛车的巨量数据。

但正如你所知，在一级方程式赛车中，眨眼之间可能就是输赢的区别，在这种情况下，他们非常依赖数据。迈凯伦在英国拥有大约900名工程师，他们在比赛期间处理这些数据并进行实时调整。这将是数字化转型的另一个非常好的例子，以及数据今天在一级方程式赛车中发挥的巨大作用。

MICHAEL KRIGSMAN: 这种依赖数据进行转型的业务转变，有多少依赖实时数据？

SHAWN BICE: 是的。是的，我的意思是，越来越多的业务每天都在变得更加实时。如果你回想一下，实时应用程序、实时数据的例子是什么？我认为我最喜欢的一个例子是股票交易。那是非常实时的。你以毫秒为单位测量交易。

但今天存在的实时应用程序类型，我的意思是，你看到它们无处不在。以网约车为例。当你拿出手机叫车时，大多数人都会看着手机来追踪司机，准确地查看他的位置，或者查看送餐服务。你可以真正地跟踪汽车直到它到达你这里。

这种事情以前不是… 这种类型的需求、这种类型的应用程序在10年前并不真正存在。所以如果你想想你手机上的每个应用程序，其中都发生了一些实时活动，这让你了解它变得多么普遍。所以在某种意义上，我会说，过去，实时可能只是一些应用程序。但今天，它真的正在迅速成为常态的一部分。

MICHAEL KRIGSMAN: 我认为客户体验是数字化转型非常重要的一部分。当你在说话时，我在想，作为消费者，我们已经开始期望这种类型的实时互动，当然，这对我们正在构建的应用程序、基础设施和数据本身都产生了重大影响。

SHAWN BICE: 哦，是的。我的意思是，想想有多少服务隐藏在这些庞大的消费者应用程序背后。你和我可能知道它是一种电子邮件服务，或者如果你曾经使用Zoom进行视频会议，它只是一种视频服务。

但想想疫情发生的时候… 在疫情发生之前，如果你对我说，世界上每个学生明天都可以通过视频会议进行教育，或者整个劳动力现在将在全球范围内远程工作… 想象一下这样的事件。没有人认为这样的事情会发生。

它发生了，当然，我们人类会想办法度过它。但实际上，你所发生的是字面意义上的全面扩展，只是大规模的扩展。看看像Zoom这样的客户，想想这个系统背后有多少复杂性。现在学生们只需要它能正常工作，以便他们可以与老师互动。

如果你和我正在开一个工作会议，我们需要音频和视频能够正常工作。我们真的不在乎幕后发生了什么。但是像Zoom这样的人，他们需要拥有正确的工具集，以便他们可以观察整个环境。你可以想到该环境中的许多部分，没有人能够在大脑中处理所有这些信息。

这就是为什么今天的工具如此重要。但是这些工具可以帮助你观察所有信息，查明这些问题。它们会告诉你发生了什么、为什么会发生、如何补救。因此，这些系统比以往任何时候都更大、更复杂，因此今天可用的工具现在非常重要。

MICHAEL KRIGSMAN: 与传统的数据和分析非常不同，比如，报告历史数据或根本没有实时成分的历史事件。

SHAWN BICE: 哦，是的，是的。我想… 天啊，当我刚开始工作的时候，很多… 我认为报告是一件大事，而带有可视化的报告是一件大事。把一张纸放在桌子上，上面有饼图或折线图，而且还是彩色的，那可是一件大事。

看看今天的效率工作者，他们正在动态地查看数据的多个维度，触摸屏幕，通过触摸手指在完整的业务工作流程中移动。所以，是的，世界已经发生了很大的变化。

MICHAEL KRIGSMAN: Shawn，你多次提到速度，指的是性能和可扩展性。其中很大一部分依赖于基础设施。那么基础设施的总体重要性，以及它对Splunk的重要性如何？

SHAWN BICE: 是的，我的意思是，基础设施… 或者你想到一个数据平台。如今最重要的事情之一是客户确实拥有强大的数据基础。有时候人们会说，嘿，拥有强大的数据基础实际上意味着什么？

我喜欢用简单的英语来表达，所以我这样说：如果你正在尝试创造一种新的客户体验，但你总是听到“不”，比如，嘿，我们需要推荐一些东西，或者我们需要检查装配线上每秒钟的货物。无论你可能在做什么，当人们回来并说，不，我们做不到，或者我们无法获得该数据，或者这是不可能的时候，这可能是一个没有强大的数据基础的好的信号。

但另一方面，拥有强大数据基础的客户，他们经常说“是”。他们提出了一些他们早上甚至没有想到的新想法。当他们去说，嘿，我们可以在这里提出建议吗，或者如果我们想建立一个新的视频流体验… 他们经常找到一种方法。哦，是的，那是我们架构的一部分，另一个完全托管的API。

在这种情况下，这些基础至关重要。我所见到的那些在疫情期间真正蓬勃发展的客户，他们拥有强大的数据基础。我所见到的那些苦苦挣扎的人，他们没有。他们经常不断地碰壁。但归根结底，有了强大的数据基础，你真的可以将数据转化为行动。这就是我们在Splunk喜欢谈论它的方式。

但与此同时，很多客户从根本上需要理解，他们需要观察整个基础设施。他们需要确保它是安全的，所以归根结底，他们的整个系统都在不断地启动和运行。

MICHAEL KRIGSMAN: 那么什么是数据基础？例如，你在Splunk中使用的数据基础。你能为我们详细介绍一下吗？

SHAWN BICE: 是的。因此，当人们从客户的角度谈论数据基础时，归根结底，今天的许多客户都在尝试重塑自我或创造新的客户体验。没有强大基础的迹象是，你总是被告知“不”。对于你拥有的任何想法，你想要构建的任何体验，总是像，哦，我们做不到。我们做不到。

客户找到一种可以说很多“是”的方法，比如这是一个新的体验。你以前从未做过。我们想去构建它。他们的架构或他们的数据基础允许这种情况发生。这是一个非常好的迹象。

但从Splunk的角度来看，Splunk的宗旨是帮助客户将数据转化为行动。你最不希望的就是数据堆放在那里，你却无法用它做任何事情。一切都是为了从你的数据中获得最大价值。这是Splunk的一个方面。另一方面，就是确保你可以运行你的环境并保持其安全的基本要素。

MICHAEL KRIGSMAN: 好的，我们有了业务目标。我们有了数据基础。需要建立什么样的团队才能有效地完成所有这些工作？

SHAWN BICE: 是的，这是一个很好的问题。我通常会在会议中私下回答这个问题。我想说的是，当很多人试图实现技术现代化时，你也需要考虑如何实现你的员工队伍现代化。有一点要时刻记住，在数据领域，从1970年到2000年，几乎只有一种做事方式。

这么多年来，人们已经习惯了用一种方式处理数据。你不能让熟悉感扼杀创新或成为盲点。所以我总是鼓励大家——真的，真的不要让自己陷入这样的陷阱：哦，我们一直都是这么做的，以后也得这么做。

我经常看到这种情况，因为很多人在他们的数据库管理员团队或IT部门里，都有工作了10年、15年、20年的人。有时候这些人掌握了大量的机构知识，这很好。但是，如果这样的人不太愿意接受一些新技术，你真的可能会发现自己停留在过去。这就是我所说的，不要让熟悉感成为阻碍创新的盲点。

所以你真的，真的要非常注重如何使你的员工队伍现代化。因为当你这样做时，你会发现这些变革推动者——他们会去研究新的图数据库或时间序列数据库，或者他们会探索账本。然后他们会将其整合到你的数据架构中，以便当你的业务部门开始提出新的应用时，这些人往往会说“没问题”。这就是你绝对想要实现员工队伍现代化的原因。

MICHAEL KRIGSMAN: 我还看到一些非常有经验的商业领袖说，你们给我的这些数据——我知道它们不对，因为我对这件事的直觉总是非常准确。那么，数据团队成员该如何应对这种历史主义的方法呢？

SHAWN BICE: 是的，我举一个一级方程式赛车的例子。扎克·布朗是迈凯伦一级方程式车队的首席执行官。就在几周前，我们一起吃晚餐。他已经公开分享了这个故事，所以我可以在这里说。迈凯伦F1车队的一位车手——他的名字是兰多·诺里斯。他参加了俄罗斯大奖赛。他还没有赢得——没有获得——他还没有在一场比赛中获得第一名。

在这场俄罗斯大奖赛中，他每一圈都处于领先地位。比赛还剩大约五圈时，开始下雨。雨云逼近。数据显示，迈凯伦应该进站，换上湿胎或者能应对湿滑路面的轮胎，这样他们很有可能赢得这场比赛。

但是他们没有听从数据。他们实际上听从了那种发自内心的情绪，我们已经走到这一步了。我们可以完成比赛。然后开始下雨，接下来你知道的，这辆车甚至无法留在赛道上。梅赛德斯车队紧随兰多之后。他们听从了数据，进站，更换轮胎，毫无问题地赢得了比赛。

所以扎克会告诉你他们应该听从数据。在这种情况下，他相信他们本可以赢得比赛。这并不意味着你的直觉一定是错的。很多时候，你的直觉可能是对的。但天哪，对他们来说，这是一次关于信任数据并听从数据的重要教训。

MICHAEL KRIGSMAN: 我认为需要时间来培养一种数据文化，在这种文化中，人们对数据充满信心，我们更愿意服从数据，而不是试图与数据对抗。

SHAWN BICE: 是的，我认为这很大程度上源于旧世界的电子表格。你还记得你收到客户列表的那一天吗？它会附在电子邮件中。然后你把它发给另一个人，很快，这封带有电子表格的电子邮件——它是真理的来源，我应该基于它做出决策吗？我想说的是，这是关于治理。

今天，有很多不同的数据系统。我见过公司在以下方面遇到困难——或者他们没有足够的信心。当你真正坐下来查看细节时，你会发现他们实际上没有良好的治理。他们无法对数据进行分类。他们看不到数据的拓扑结构。他们不了解数据是如何流动的。他们真的无法告诉你谁有权访问什么。

在这种特定情况下，是的，这些人不信任数据。事情进展非常缓慢。但是，如果你有非常好的治理，那么你就会知道，比如，我可以清楚地看到谁有权访问什么数据。我可以看到它的拓扑结构。我知道它在哪里，它是如何流动的。当你拥有良好的治理时，你就会充满信心，这会给你信任感来做出决策。

MICHAEL KRIGSMAN: 那么，谁负责构建这种数据治理的程序呢？

SHAWN BICE: 是的，在较大的组织中，通常——我见过治理团队，在较小的组织中。它可能位于任何负责技术的团队中。但它几乎总是核心架构中的某个人与安全团队等的良好监督相结合，因为它们是如此——想想现在发生的所有的勒索软件事件。而且，天哪，能够保护你的数据可能比以往任何时候都更加重要。但最常见的情况是，直接回答你的问题，几乎总是核心基础设施团队与安全团队合作的结果。

MICHAEL KRIGSMAN: 那么，在机器学习和人工智能环境中会发生什么呢？如果你无法掌握你的数据和模型，你可能会发现悄然而至的偏见和其他问题，你甚至可能没有意识到，直到日后出现问题？

SHAWN BICE: 哦，当然。是的，当你在治理和你的整个数据环境的背景下考虑机器学习时，想想——你可以从一个简单的例子开始，你可以开始考虑你的数据的质量，并使用机器学习来跟踪数据的模式。

然后你可以理解，比如，想象一下，如果一个客户改变了——想象一下，有人结婚了，他们的姓氏改变了，那么这是两个不同的客户ID，还是一个？你如何跟踪它。当你使用机器学习时，机器学习通常能够为你跟踪这样的模式，并识别它并指出它。就像在大海捞针一样。

或者以异常检测为例。想象一下，在你的环境中，突然有一组特定的数据正在以一种前所未有的方式被完全访问。使用机器学习之类的工具，你可以随时检测到这样的异常并采取措施。

因此，作为一个行业，我们正处于机器学习的早期阶段，但我会告诉你，我认为这实际上将是人们真正理解和接受的最重要的事情之一，因为它真的会成为你的助手，帮助你分析数百万个数据文件。

MICHAEL KRIGSMAN: 当然，当涉及到机器学习时，可解释性越来越重要。

SHAWN BICE: 是的，我经常喜欢分享这个想法——我想我在某个地方读到过，一个人每秒可以处理60比特的信息。想象一下，一个数据中心或云环境每秒发生数十亿个事件。任何人都不可能处理这些信息。因此，拥有一款工具可以帮助你找到这些异常，将其呈现给你，并以一种你可以找到大海捞针并理解它的方式解释它，这比以往任何时候都更加重要。

MICHAEL KRIGSMAN: Shawn，对于你在Splunk的客户，你们是否区分支持创新的数据投资和支持提高效率的数据投资？

SHAWN BICE: 是的。我们尽量不要这样看待数据。我们总是认为数据——有两件事你永远不能用数据做。你永远不能丢失它，你永远不能给出错误的答案。如果这两件事中的任何一件发生了，那就不好了。那是最终的信任破坏者。

因此，只要你对你的数据进行非常、非常严格和勤奋的管理——这是不容谈判的，每天都需要发生——那么你就可以考虑你想做的创新以及对系统的改进等等。

但在Splunk，当我们考虑创新时，它再一次回到了我们的客户，你试图为他们构建什么。有时它导致我们构建新的功能。有时它扩展了已经存在的东西。与此同时，我们一直在维护我们的代码和数据，以确保我们每天都在加强这些系统。

MICHAEL KRIGSMAN: Shawn，你对使用数据来驱动数字化转型有什么建议？

SHAWN BICE: 嗯，我想与大家分享的建议是，充分利用——充分利用云计算。充分利用完全托管的API。不要满足于过去的方式。你真的不想做那些无差别的繁重工作。利用它们。

不要害怕探索差异。请记住，所有这些新的专用系统都是有原因的。实际上，开发人员会说，我喜欢这个，因为我不必在功能、性能和规模之间进行权衡。而且他们能够比以往任何时候都更快地构建这些应用程序。

我想说的第三件事是，不要先选择技术，然后再想出用例。今天，我总是从用例开始。你试图做什么？因为如果你首先从技术开始，该技术的任何局限性都可能限制你的应用想法，然后你就有点——你真的在为自己制造阻力。

因此，当你真正探索并充分利用并拥抱新的技术，并且你拥有这些新的系统时，接下来你知道的，你就可以构建过去无法构建的应用程序。我想指出的另一点是，特别是如果你是一家已经存在很长时间的企业，不要让熟悉感成为阻碍创新的盲点。它总是在那里。它总是会摆在你面前。

但我看到的那些克服困难的客户和公司——他们已经实现了员工队伍的现代化——哇，他们行动迅速，而且在做他们以前从未想过能做的事情。所以，这些是我会分享的一些观点，或者说是我会为任何想要将数据迁移到云端的人提供的建议。

MICHAEL KRIGSMAN：Shawn，在结束之前，我必须问你，这一切将走向何方？

SHAWN BICE：是的。我认为这一切将走向一个比以往任何时候都发展更快的工作环境。也许10年前的常态是事情需要一年或六个月。我认为，那些过去通常需要一年的项目——在新世界里可能只需要一个月。

我认为，它将走向企业能够以比以往任何时候都更快的速度行动——比他们以前行动得更快，这意味着他们能够几乎实时地响应他们的客户群。我认为这也意味着客户将能够构建新的体验，并在这些体验上进行迭代。

推出新东西然后在一年后更新它的日子——我认为那些日子已经过去了。你将推出一些东西，你将学习，你将迭代，你将学习，你将迭代。我认为所有这些事情都将成为所有人的共同实践。如果这一切真的能够实现，那么最终，所有这些客户都将真正把他们的数据转化为行动。

MICHAEL KRIGSMAN：因此，我们完成了一个完整的循环，数据成为数字化转型的支持者和驱动者。

SHAWN BICE：绝对正确。确实是这样。当你进行数字化转型时——我看到人们非常兴奋，因为一切总是从“天啊，我们过去永远无法做到这一点，看看我们今天正在做什么”开始。没有什么比看到有人以对业务产生深刻影响的方式使用技术更好的了。这简直——太令人高兴了。

MICHAEL KRIGSMAN：确实如此。Splunk 产品和技术总裁 Shawn Bice。非常感谢您抽出时间今天与我们交谈。

SHAWN BICE：谢谢。