如果IT和业务领导者将人工智能项目与业务目标挂钩,并为成功设定指标,他们就能看到哪些实验未能实现目标——并在成本累积之前及时止损。
图源:Harbucks / Shutterstock
许多运行人工智能试点项目的组织不可避免地会遇到一个关键的IT困境:何时停止或继续前进。如果他们过早地放弃一个未达预期的试点项目,他们可能会错过后续的巨大利益,但如果他们坚持太久,可能会浪费大量的时间、金钱和资源。
一方面,Forrester(弗雷斯特市场咨询,是一家独立的技术和市场研究公司,针对技术给业务和客户所带来的影响提供务实和具有前瞻性的建议。公司已经被公认为思想的领导者和可信赖的咨询商,通过所从事的研究、咨询、市场活动和高层对等交流计划,帮助那些全球性的企业用户建立起市场领导地位。)最近警告组织不要过早地寻求人工智能的投资回报率,因为他们可能会错过人工智能的好处。
但人工智能并不便宜,没有价值的试点项目可能是资金黑洞。例如,根据Gartner(高德纳,Gartner Group公司成立于1979年,它是第一家信息技术研究和分析的公司。它为有需要的技术用户来提供专门的服务。Gartner已经成为了一家独立的咨询公司,Gartner公司的服务主要是迎合中型公司的需要,它希望使自己的业务覆盖到IT行业的所有领域,从而让自己成为每一位用户的一站式信息技术服务公司。)的数据,一个retrieval-augmented generation/RAG(即检索增强生成,是一种自然语言处理模型,旨在改进各种NLP任务的表现,包括问答、摘要生成等。)人工智能文档搜索项目可能需要高达100万美元的部署成本,每年每个用户的持续成本高达11,000美元。从头开始构建的医疗、保险或金融large language model/LLM(大型语言模型。是使用深度学习算法处理和理解自然语言的基础机器学习模型。这些模型在大量文本数据上进行训练,以学习语言中的模式和实体关系。LLM可以执行多种类型的语言任务,例如翻译语言、分析情绪、聊天机器人对话等。)人工智能可能需要高达2000万美元。
当然,根据Gartner的说法,人工智能试点项目最近的成功率更高。在2022年,近一半的人工智能试点项目未能投入生产,而预计明年将只有约30%的人工智能项目失败。
尽管如此,考虑到如今人工智能实验的广泛程度,30%的失败率代表着大量的时间和金钱。EY(安永,成立于1989年,是一家总部位于英国伦敦的跨国性专业服务公司,全称是安永会计师事务所,为国际四大会计师事务所之一。)在7月发布的一项调查发现,95%的高级管理人员表示他们的组织目前正在投资人工智能。
那么问题就变成了:首席信息官或首席人工智能官何时知道是时候放弃一个人工智能项目呢?虽然没有放之四海而皆准的答案,但人工智能专家表示,IT领导者可以采取措施确保他们保留有意义的人工智能项目,放弃没有意义的项目。
一、定义成功
IT领导者在启动人工智能试点项目时应该采取的第一步之一是定义成功的衡量标准——除了投资回报率之外——并设定一个时间表来检查进展,人工智能顾问、SAP(SAP公司,它是成立于1972年总部位于德国沃尔多夫市的全球最大的企业管理和协同化电子商务解决方案供应商、全球第三大独立软件供应商。在全球拥有6万多名员工,遍布全球130个国家,并拥有覆盖全球11,500家企业的合作伙伴网络。)的人工智能前副总裁兼营销主管Andreas Welsch(安德烈亚斯·韦尔施)说。
“挑战在于人们一直沿着不停止的道路走下去,因为他们总是希望下一个突破就在眼前。”Welsch(韦尔施)说,“很多时候人们没有设定适当的目标。”
例如,人工智能项目的一些关键绩效指标可能包括将客户满意度提高10%,将填写request for proposal/RFP(需求方案说明书,也叫提案企划书/意见请求书/建议书邀请函。由那些需要某种商品或服务的公司提出并分发给那些预期中可能的供应商。供应商随即提供针对该需求方案标准说明的提案。撰写需求方案说明书要求那些需要某种商品或者服务的公司确定他们在商业上和技术上的需求,同时要求供应商在文件中阐明他们能在多大程度上满足这些需求。信息系统业界经常为口头的约定和暧昧的订货而产生的开发现场的混乱和纠纷,以及交期的延迟和系统障碍等伤脑筋。可以通过RFP预先明确筹措条件和契约内容来防止这种混乱。简写为RFP,通常也被称为“需求建议书”或“招标书”。)的时间缩短30%,或者每月支付发票的时间减少四个小时。
在预定的检查点,IT和业务团队可以确定朝着这些目标的进展情况。如果一个项目没有达到指标,团队可以决定是放弃它还是给它更多时间。如果一个客户服务机器人将满意度提高了7%而不是10%,也许值得继续投资。
然而,在某些情况下,组织可以从一个没有重点的开始中恢复过来,金融科技公司Finastra(是一家全球领先的金融服务软件和云解决方案供应商,成立于2017年,由Misys和D+H公司合并而成。 Finastra专注于在开放式Fusion软件架构和云生态系统上开发部署全新的下一代科技,为全球金融机构、小区银行和信用合作社提供服务。)的首席人工智能官Adam Lieberman(亚当·利伯曼)补充说。有时,首席信息官或首席人工智能官可以通过定义一个可行的路线图来帮助一个失败的项目恢复。
“当目标不明确时,项目将缺乏重点并失败,”他说,“这是项目不会成功的最早迹象,但这也是过程的早期阶段,可以重新聚焦并建立一个更具体的最终目标。”
Kotter International(是一家总部位于西雅图和波士顿的管理咨询公司,由约翰P.科特/John Paul Kotter创立。其人为哈佛商学院的荣誉教授,专注于领导力和变革管理。公司应用Kotter的领导力、战略执行、转型和大规模变革的研究成果进行经营。)的首席增长和商务官Kathy Gersch(凯西·格什)补充说,设定关键绩效指标的一个挑战是衡量结果。例如,衡量客户情绪可能并不困难,但衡量员工使用副驾驶起草电子邮件所节省的时间可能更难。
“投资回报率可能来自许多不那么有形的东西,”她说,“如果你没有衡量所有这些事情,你可能会因为说‘哦,我们没有得到我们的投资回报率’而太快地放弃一个项目。”
二、连接到业务需求
Welsch(韦尔施)补充说,除了明确界定的关键绩效指标外,组织还应该将人工智能项目与特定的业务需求联系起来。在某些情况下,组织似乎只是为了利用这项技术而启动人工智能项目。然而,成功的项目解决了组织的痛点。
“我们试图解决的业务问题是什么?”他说,“你应该非常密切地与你的业务利益相关者合作,最好是在一开始就说,‘我们正在试图解决什么问题?’”
Gersch(格什)补充说,许多被放弃的人工智能项目都没有满足这个基本要求。
“如果你让一个小的特别项目团队在旁边研究人工智能应该做什么,而他们没有与业务联系起来,那么就很难被应用,”她说,“从你的角度来看,这就是事情可能被过早或过晚放弃的地方,因为它们真的与业务没有联系。”
虽然Gersch(格什)建议将人工智能项目与商业目标联系起来,但她也鼓励进行实验。当一个项目与业务目标挂钩时,员工可能更有可能接受它。
她说:“一旦你能让人们真正应用它,使用它并利用它,你可能会学到更多关于人工智能的可能性。”
三、限制损害
启动人工智能项目的一种方法是设定一个有限的时间框架,Aible(成立于2018年10月,总部位于旧金山,专注于开发“现实世界”的人工智能技术,该技术基于成本效益权衡和运营约束来分析数据,以评估业务影响和可能带来的业务成果。)的首席执行官Arijit Sengupta(阿里吉特·森古普塔)说。在许多情况下,Aible及其客户会在两个工作日内共同决定一个项目是否可行,他说。
Sengupta(森古普塔)补充说,虽然有衡量标准很重要,但IT和业务领导者也不应该过于执着于实现确切的目标。在某些情况下,最初的目标过于宏大,或者并不是业务真正需要的。
“你基本上是在想象你可能想要的东西,然后你说,‘好吧,如果你给我一辆会飞的车,我会爱它的,’”他说,“然后,六个月后,有人带着一辆不太会飞的汽车进来,你只会回复,‘嗯,那不是我想要的。’但实际上那都不是你需要的;你实际上需要一艘更快的船。”
他补充说,为期六到九个月的人工智能试点项目可能很危险。“如果你要放弃它,你不会想在九个月的时候放弃,因为那时你会陷入沉没成本误区,人们会期望能让它真正起作用,因而投入更多徒劳的努力。”
来自Finastra的Lieberman(利伯曼)补充说,一些失败的项目并不是完全损失,在某些情况下,暂停一个项目可能是比完全放弃更好的选择。
“重要的是要注意,失败是创新的必要部分,”他说,“人工智能领域的进步是迅速的。这就是为什么最好暂停项目,而不是完全放弃它们,因为新的能力和技术在不断涌现。”
作者:Grant Gross(格兰特·格罗斯)
Grant Gross(格兰特·格罗斯)是CIO的资深撰稿人,是一名长期的科技记者。他曾担任华盛顿记者,后来担任IDG新闻服务的高级编辑。在他职业生涯的早期,他曾担任Linux.com的总编辑和科技职业网站Techies.com的新闻编辑。在遥远的过去,他曾在明尼苏达州和达科他州的报纸担任记者和编辑。
译者:宝蓝
【睿观:人工智能项目:一场高风险的赌博
想象一下,你手上有几张彩票,每张彩票都代表着一个AI项目。有些彩票可能价值百万,有些可能一文不值。你的目标是找到那张能让你一夜暴富的彩票,但同时也要避免把所有的钱都浪费在空想上。
如何判断一张彩票值不值?
明确目标: 首先,你要清楚自己想赢多少钱,什么时候能赢。比如,你想让公司的销售额增长10%,还是想提高客户满意度?
设定时间表: 然后,你要给自己一个期限。如果过了这个期限,彩票还是没中,你就得考虑换一张了。
不断评估: 在等待中,你要经常看看这张彩票有没有中奖的迹象。如果进展缓慢,或者完全没有进展,你就得做出决定了。
灵活调整: 有时候,你可能会发现这张彩票其实不是你想要的。没关系,你可以换一张,或者把这张彩票改成另一种玩法。
为什么有些人投注彩票会失败?
目标不明确: 有些人买彩票只是为了好玩,并没有明确的目标。
投入过多: 有些人为了中大奖,把所有的钱都押在一张彩票上。
不及时调整: 有些人明明知道这张彩票没戏了,还是不肯放弃。
如何避免踩坑?
多听专家的建议: 找一些懂彩票的人给你出主意。
不要盲目跟风: 别人买的彩票不一定适合你。
保持理性: 不要被中大奖的希望冲昏了头脑。
总结
人工智能项目就像一场高风险的赌博,既有巨大的回报,也有可能血本无归。想要提高中奖率,就要做好充分的准备,制定详细的计划,并根据实际情况不断调整。】