经管前沿
2023年07月28日
从2022年11月,OpenAI发布ChatGPT,人工智能掀起一股热潮。到2023年2月,微软抢先一步,推出搭载GPT技术的新版引擎(必应Bing),由此聊天机器人开始渗透“搜索”领域。今天,用户可直接向搜索引擎提问,无需再通过关键词搜索获取结果,人们在寻找答案的路上,似乎又缩短了一步。
搭载GPT技术的搜索引擎一经问世,首当其冲的是传统搜索界的“老大哥”Google,目前谷歌占据着搜索引擎市场90%的份额。据路透社(Reuters)2023年报道,从2月-3月,必应(Bing)的流量增加了15.8%,而谷歌(Google)的流量在同一时期下降了接近1%,每1%的搜索广告市场份额意味着2亿美元的年收入(雅虎财经2023年)。
其实谷歌于2021年5月就宣布推出LaMDA(对话式语言模型),但却没有利用它来应对像OpenAI 这样的威胁,答案正如谷歌的首席执行官(CEO)Pichai所说,谷歌必须“大胆而负责任”,找到折衷方案。
这不禁引发讨论,ChatGPT对话式信息收集对比谷歌的关键词检索,孰高孰低? 尽管这一问题,社交媒体上已有各种探讨,但却未有研究提供明确的答案;也存在ChatGPT的对话式是否会影响信息获取效率,以及对话形式的搜索的用户满意度等问题。
近日,香港大学商学院人工智能研究所主持的一项最新研究,由来自迈阿密大学(牛津)徐睿沄,香港理工大学冯越,香港大学陈海亮共同合作发表题为“ChatGPT vs. Google: A Comparative Study of Search Performance and User Experience”研究成果,研究设计两组对照的随机线上实验,发现使用ChatGPT用户在搜索任务上花费的时间明显减少,但他们的整体表现与使用谷歌的用户相差无几。且ChatGPT在不同教育水平的用户搜索表现上实现了均衡,有可能实现信息获取的民主化。
【实验设计】
研究团队进行了一项随机在线实验,将112名线上(母语为英文)参与者随机分为两组完成三个预设的信息收集任务: 一组使用类似chatgpt的工具,另一组使用类似Google搜索的工具,在参与者完成任务后,将填写一份使用满意度调查问卷,包括使用难易度、实用性、舒适度和满意程度,最后将收集参与者的年龄、性别、教育背景等个人信息。
图1. 聊天机器人工具 (ChatGPT) 实验截屏
图2. 搜索引擎工具 (Googl)实验截屏
【四纬度比拼:高效性 易用性 准确性 体验感】
实验结果表明,在高效性、易用性和体验感方面,ChatGPT更胜一筹,但需要警惕的是,ChatGPT可能出现过度依赖、无法为使用者纠错等问题,且易生成错误、前后不一致等信息。此项研究明确了ChatGPT目前的短板和长板,在答案的可信度和信息核查准确度上亟待提升。
这项工作为搜索引擎管理和未来信息获取技术提供了宝贵的洞见。作者认为AI赋能的聊天机器人与传统的搜索引擎结合,必然是业内不容忽视的大事件,将ChatGPT推广到传统的搜索领域,需要从根本上提高ChatGPT的短板,这样才能在真正意义上缩短从问题到答案的距离。
本文联合作者香港大学经管学院陈海亮教授表示,搜索引擎的未来在于,一问一答对话形式带来的体验感和易用性,与传统搜索引擎的搜索速度和答案质量控制之间的平衡。请大家拭目以待,技术将继续进步,不久的将来我们将看到更先进的信息搜索工具。