头图

大家好~这是 Voice Agent 学习笔记系列的第二十八篇。我是课代表十三👩‍💻。

在刚刚过去的 Google I/O 开发者大会上,Google 展示了其在人工智能领域的最新进展。从升级搜索引擎到推出生成式内容工具,再到硬件的更新,Google 正以惊人的速度将 AI 全面融入其生态体系。

大会上,Google 发布了多个实时多模态新品,包括支持音视频输入的多模态模型 Gemma 3n 、升级主动音视频功能的 Gemini Live API 、支持实时双语翻译配音的 Google Meet 、最新版 Project Astra ……这些都预示着未来交互体验的巨大变革。

早在今年 4 月,Google 就已发布了 601 个世界领先企业的生成式 AI 案例。这些案例覆盖了 11 个行业以及 6 种 AI 智能体类型。

我们从这 601 个案例中,邀请 Gemini 为我们挑出 39 个涉及实时互动的项目,并分析了其未来在 RTE 与 AI 融合发展方面的潜在可能性 ,希望可以给你带来一些新的视野和思考。Enjoy~

一、汽车与物流 Automotive & Logistics

大陆集团携手Google Cloud为汽车提供车载语音指令系统

1.大陆集团:车载语音指令系统

大陆集团(Continental) 正借助 Google 的数据和 AI 技术,致力于开发更安全、高效且以用户体验为中心的汽车解决方案。 这次合作的首批成果之一,是将 Google Cloud 的对话式 AI 技术集成到 Continental 的车载语音指令系统 Smart Cockpit HPC 中。

RTE+AI 潜在场景:

  • AI 增强型远程诊断与辅助驾驶: 当车载 AI 语音助手无法解决驾驶问题时,系统可无缝转接至远程专家。专家利用 RTC 实时视频结合 AI 分析车辆数据,通过 AR 标注指引驾驶员操作或远程控制辅助驾驶。
  • AI 赋能的紧急救援: AI 可以理解语音求助并自动连接紧急服务。
  • 智能导航: AI 驱动的导航系统能够预测交通状况,并通过 RTC 播报个性化路线建议。

2.大众汽车:myVW 应用虚拟助手

大众汽车(Volkswagen of America) 在 myVW 应用中集成了一款虚拟助手,方便驾驶员查阅车主手册并解答疑问,例如「如何更换轮胎?」或「数字仪表盘上的这个指示灯代表什么?」 此外,用户还可以利用 Gemini 的多模态能力,通过智能手机摄像头对准仪表盘,即可获取关于指示灯的详细信息和相关背景知识。

RTE+AI 潜在场景:

  • AI 驱动的视觉故障诊断: 驾驶员通过 RTC 视频上传仪表盘或车辆部件图像,AI 即时识别故障类型,并根据用户手册提供操作指导。
  • AI 引导的故障排除: AI 可以根据驾驶员的反馈和车辆传感器数据,提供个性化的解决方案,并指导驾驶员进行简单维修。对于复杂的操作(如更换轮胎),AI 助手可通过 RTC 进行视频演示,并结合 AR 技术,在驾驶员的手机屏幕上进行实时指导,确保操作的准确性和安全性。
  • 专家远程协助: 如用户无法通过 AI 解决问题,AI 可将用户无缝接入专家客服,专家通过共享屏幕、AR 标注等方式远程指导用户进行故障诊断与排除。

3.704 Apps:守护乘车出行安全的情绪检测 APP

704 Apps 公司 致力于为最后一公里运输领域开发应用程序,每天连接着成千上万的司机和乘客。在行程期间,车内人员对话的音频内容会被发送到 Gemini AI 模型,以测量乘客的情绪「温度」。该工具能够将「抢劫」、「袭击」、「绑架」等特定词语归类为具有敌意,从而生成警报,以便在危险情况发生之前预先采取措施。

RTE+AI 潜在场景:

  • AI 预警触发的一键报警: 当 AI 检测到车内出现高风险词汇或异常行为时,自动触发一键报警功能,驾驶员或乘客无需手动操作,即可将警报信息(包括实时位置、车内音频视频等)发送至监控中心或紧急联系人。
  • AI 驱动的安全干预: 结合 AI 情绪识别和 RTC 实时语音通话,客服人员可主动介入高风险行程,进行远程安抚和安全指导,必要时联系警方,降低风险发生的概率。

4.Nuro:AlloyDB 加持的自动驾驶解决方案

Nuro: 一家自动驾驶公司,利用 AlloyDB 的向量搜索功能,提升其自动驾驶车辆对道路上各类物体的识别和分类精度。

RTE+AI 潜在场景:

  • AI 分析的车辆状态监控: 通过 RTC,远程监控中心可实时获取车辆传感器数据、摄像头图像等,并利用 AI 进行分析,监测车辆运行状态、电池电量、货物状态等,及时发现潜在问题。
  • AI 协同的安全接管: 在复杂或不确定的环境中,远程操作员可以随时通过 RTC 远程接管车辆控制,确保行驶安全。AI 系统仍然可以提供环境感知、路径规划等辅助信息,与操作员协同完成驾驶任务。

二、商业和专业服务 Business & Professional Services

Nowports 正利用AI技术革新物流行业

1.埃森哲:AI 赋能的零售虚拟助手

埃森哲(Accenture) 正致力于改造一家大型零售商的客户支持体系,通过部署虚拟助手,提供便捷的自助服务选项,从而提升整体客户体验。

  • AI 导购 + 个性化推荐: 虚拟助手根据客户浏览历史和购买偏好,推荐个性化商品,并通过 RTC 发起视频通话。AI 驱动的虚拟形象(例如时尚顾问)能够分析客户的面部特征、穿搭风格等,提供个性化的商品推荐和搭配建议。
  • AI 增强的虚拟试穿与沉浸式体验: 客户通过 RTC 连接,利用 AR/VR 技术进行虚拟试穿,体验商品的真实效果,提升购买决策的准确性。

2.Quom:AI 驱动的金融普惠解决方案

Quom 是墨西哥一家专注于金融普惠的公司,他们开发了基于 AI 的对话式智能客服,旨在优化用户和客户支持体验,并提供个性化服务。

RTE+AI 潜在场景:

  • AI 远程金融顾问服务: 客户通过 RTC 与 AI 虚拟顾问进行视频咨询,AI 分析客户财务状况,提供个性化的理财建议和产品推荐。
  • AI 与人工服务的无缝衔接: 如需人工帮助,AI 可将客户无缝接入人工顾问,并共享会话记录和分析结果,确保高效便捷的服务体验。

3.Juganu:智慧城市/商店 SaaS 服务

Juganu 是一家专为智慧城市和智慧商店提供 SaaS 服务的公司,致力于使用 Google Cloud 实现实体店自动化和数字化。该公司已着手开发数字孪生技术,使零售商能够通过虚拟视角管理门店,从而助力自动完成日常任务,提升运营效率,并为顾客带来更优质的体验。

RTE+AI 潜在场景:

  • AI 驱动的远程巡店与智能管理: 管理人员通过 RTC 连接数字孪生门店,AI 实时分析监控画面,自动识别异常情况(例如商品错放、货架空置),并自动通知相关人员处理。
  • AI 安全监控与行为分析: 通过 RTC 连接摄像头,AI 能够实时识别人脸,分析人员的行为模式,识别异常行为(例如盗窃、破坏),并及时发出警报。

4.Nowports:智慧物流解决方案

Nowports 正利用 AI 技术革新物流行业,力求在竞争中脱颖而出。他们通过分析关键运营数据,旨在精准预测市场动态,从而优化整个供应链流程。

RTE+AI 潜在场景:

  • 货物实时跟踪与状态监控: 通过 RTC 实时获取货物位置信息,AI 分析运输轨迹,自动检测异常情况(例如偏离路线、长时间停留),并及时发出警报。
  • AI 预测的运输状态监控: AI 分析历史数据和实时信息,预测货物运输状态(例如预计到达时间),并主动通知客户,提升服务质量。
  • AI 优化的车辆智能分配与路线优化: 通过 RTC 实时获取车辆位置和状态信息,AI 根据订单需求和路况信息,智能分配车辆,并根据交通数据和天气信息,动态调整车辆行驶路线,提高运输效率。

三、金融服务 Financial Services

Nowports 正利用AI技术革新物流行业

1. Contabilizei:金融服务 AI 解决方案 The Concierge

Contabilizei 正利用基于 Vertex AI 平台的 AI 解决方案「The Concierge」,提升巴西金融服务行业的客户服务水平。该平台借助 Vertex AI Search 和 Model Garden 等工具,能够提供快速且个性化的客户响应。

RTE+AI 潜在场景:

  • AI 辅助的税务咨询与申报指导: AI 助手分析客户财务数据,并通过 RTC 视频向客户讲解税务政策和申报流程,提供税务优化建议,并自动检查申报信息的准确性,减少出错概率。客户可通过屏幕共享,与 AI 顾问共同完成税务申报。
  • AI 智能匹配的实时咨询: 当客户需要向真人专家咨询时,AI 能够分析用户问题,并自动匹配最合适的税务或会计专家。随后,通过 RTC 建立连接,确保问题得到高效解决。

2.Albo :利用 AI 技术革新客户服务和金融教育模式

Albo 正在利用 AI 技术,革新墨西哥的客户服务和金融教育模式。这家新兴数字银行通过优化流程,实现了更快捷高效的客户响应,并为传统金融服务覆盖不足的用户群体,提供金融知识普及工具。

RTE+AI 潜在场景:

  • AI 辅助的远程金融知识普及: Albo 可利用 RTC 开展远程金融培训课程,向用户普及金融知识,解答疑问。
  • AI 驱动的实时客服与业务办理: 通过 RTC 接入的客户,AI 可分析用户意图,提供账户查询、交易处理等自助服务,并根据用户需求,自动转接至人工客服。

3.Discover Financial :AI 虚拟助手

Discover Financial 开发了由生成式 AI 驱动的 Discover 虚拟助手。该助手不仅能直接为客户提供帮助,还能向 Discover 的客服人员提供补充信息,从而在客户偏好的任何渠道上,提供更流畅、高效且更令人满意的互动体验。

RTE+AI 潜在场景:

  • AI 辅助的复杂问题诊断: 客户通过 RTC 发起视频求助,AI 分析客户提出的问题和展示的场景,辅助客服人员快速诊断问题,并提供解决方案。
  • AI 协同的多渠道无缝衔接: AI 可根据客户的问题类型和紧急程度,将客户智能转接到最合适的客服渠道(文字、语音、视频),并自动同步会话记录和用户信息,确保问题得到及时解决。
  • AI 智能分析的定制化方案: AI 分析客户的财务状况、消费习惯等,为客户推荐最适合的金融产品和服务,提供定制化的金融解决方案。

四、医疗保健与生命科学 Healthcare & Life Sciences

墨西哥健康初创公司Clivi与Google合作构建个性化健康监测平台

1.Clivi :个性化健康监测平台

Clivi 是一家墨西哥健康科技初创公司。他们与 Google Cloud 合作,构建了一个 Gen AI 平台,该平台能够对患者进行个性化和持续监测,从而提供定制化的响应方案、提升医疗服务的质量和覆盖范围,并减少并发症的发生。

RTE+AI 潜在场景:

  • AI 智能分诊与专家会诊: 患者发起咨询后,AI 分析患者症状和历史病历,智能分诊到相应的科室或专家,提高就诊效率。远程专家可通过 RTC 与患者进行视频会诊,AI 实时分析患者的生理指标和影像资料,辅助专家做出更准确的诊断。
  • AI 实时监测与异常指标预警: AI 实时分析患者的监测数据,自动识别异常指标,并及时通知医生和患者,提前预防并发症的发生。

2.Amigo Tech:智慧医疗平台 Amigo Intelligence

Amigo Tech 推出了基于 Google AI 技术的 Amigo Intelligence 平台,旨在自动化医疗流程、降低运营成本,并提升诊所和医疗机构的效率。 该解决方案集成了病史自动采集、高级检查分析、以及医疗 AI 聊天机器人等工具,从而变革了医疗管理模式。

RTE+AI 潜在场景:

  • AI 智能优化的客服与预约管理: 患者可以向 AI 聊天机器人咨询医疗相关问题,如预约挂号、查询报告等,无需人工干预,提高服务效率。AI 还可以分析历史数据,预测患者的就诊需求,优化预约排班,减少患者等待时间。
  • AI 辅助的远程诊断与治疗方案制定: 患者通过 RTC 视频与医生进行远程问诊,AI 分析患者病史和症状描述,辅助医生进行诊断,并提供个性化的治疗方案。

3.拜耳:流感疫情预警与响应解决方案

拜耳(Bayer) 利用 BigQuery 中的生成式 A 构建了一个数据代理,用于预测流感疫情爆发。该代理结合了 Google 搜索趋势数据和拜耳的内部数据,从而实现基于实时数据和特定地理位置的医疗保健规划。

RTE+AI 潜在场景:

  • AI 预测触发的精准警报: 基于 AI 预测的流感疫情爆发信息,通过 RTC 向该地区的公众和医疗机构发布实时警报,提醒做好防护措施。
  • AI 协同的交互式地图与数据可视化: 通过 RTC 实时更新疫情地图,展示不同地区的流感病例数、传播速度等信息,还能在地图上展示医疗物资的分布情况、供应量等信息,方便医疗机构及时调配资源,保障医疗供给。

4.Probrain :个性化听觉训练解决方案

Probrain 提供个性化的听觉刺激训练服务。通过部署基于云端的 Gen AI 解决方案,该公司实现了服务模式的现代化升级,并大幅降低了约 89% 的运营成本。最终用户也因此受益,享受了近 50% 的费用节省。

RTE+AI 潜在场景:

  • AI 驱动的个性化远程听觉训练与评估: AI 虚拟教练通过 RTC 实时语音指导用户进行听觉刺激训练,并根据用户的反馈进行调整。AI 同时在线评估训练效果,并提供个性化的训练计划。

五、酒店与旅游 Hospitality & Travel

BrushBuck Wildlife Tours与Google 合作追踪季节性动物的迁徙路线

1.Hotelplan Suisse:智能旅行 AI 聊天机器人

Hotelplan Suisse 构建了一款聊天机器人,并基于公司深厚的旅行专业经验对其进行了训练,使得该机器人能够实时回应客户问询。继此举取得成功后,该公司计划使用生成式 AI 打造旅行相关内容。

RTE+AI 潜在场景:

  • AI 驱动的个性化行程规划: 聊天机器人根据客户的偏好和预算,推荐个性化的旅行目的地和行程安排。
  • AI 虚拟导游的景点讲解: 用户在旅行过程中,可通过 RTC 连接 AI 虚拟导游,获得景点的详细介绍和历史文化背景。

2.棒约翰:披萨界的智能需求预测工具

棒约翰(Papa John’s) 披萨连锁店正在利用 BigQuery、Vertex AI 以及 Gemini 模型,构建预测工具,以更准确地预测顾客在应用程序中的订单需求。该公司还计划优化会员忠诚度计划,并提供更具个性化的营销活动。 同时,棒约翰还计划开发一款 AI 驱动的聊天机器人,以辅助处理顾客订单。

RTE+AI 潜在场景:

  • AI 辅助的个性化语音/视频点餐: 用户通过 RTC 进行语音/视频点餐,AI 识别用户的语音指令,并提供个性化的披萨推荐和搭配建议。
  • AI 增强的互动式菜单: 用户可通过 RTC 浏览互动式菜单,AI 提供详细的菜品介绍和口味推荐,并支持在线定制披萨,满足个性化需求。

3.六旗主题公园:智能游园助手

六旗主题公园 打造了一个行业领先的数字化助手,能够解答游客的疑问,并协助他们规划行程。六旗还将借助 Google Cloud 在人工智能、数据分析和基础设施方面的强大能力,在旗下各主题公园中优化运营管理,提升个性化服务水平,从而全面改善游客体验。

RTE+AI 潜在场景:

  • AI 个性化推荐的智能景点推荐: AI 分析用户的游玩记录和兴趣偏好,推荐附近的景点和游乐项目,并提供详细的介绍和排队时间信息。
  • AI 增强的互动地图: 通过 RTC 连接摄像头,AI 能够识别周围环境,提供 AR 实景导航,引导用户找到目标地点,并展示周边设施信息。

4.BrushBuck Wildlife Tours:智能观光方案

BrushBuck Wildlife Tours 公司利用 Google Sheets 中的 Gemini 模型追踪季节性动物的迁徙路线,确保每一位游客都有机会在怀俄明州欣赏到令人惊叹的野生动物景观。

RTC 潜在性:

  • AI 驱动的实时野生动物观光直播与专家互动: 通过 RTC 实时直播野生动物迁徙画面,AI 自动识别动物种类和行为,并提供相关信息。游客可通过 RTC 与专家互动,提问和解答疑问。

六、工业制造和电子 Manufacturing, Industrial & Electronics

三星Ballie球形机器人标志着AI从工具向「生活伴侣」的范式转变

1.三星:家庭伴侣机器人 Ballie

三星 (Samsung) 在其备受瞩目的全新家庭伴侣机器人 Ballie 中应用了 Google 的生成式 AI 技术。Ballie 将能够通过自然流畅的对话方式与用户互动,协助管理家庭环境,包括调节灯光、迎接访客、定制个性化日程安排、设置提醒事项等等。

RTE+AI 潜在场景:

  • 智能远程监控与安全巡逻: Ballie 可通过 RTC 进行家庭环境视频巡逻,AI 自动识别异常情况,如陌生人闯入、电器故障等,并及时发出警报。
  • AI 识别宠物行为的远程互动: Ballie 通过 RTC 与宠物进行远程互动,AI 识别宠物的情绪和需求,提供个性化的互动方式,如播放宠物喜欢的音乐、进行语音互动等。

2.Copel:电力公司 AI 智能体

巴西大型电力公司 Copel 基于 Gemini Pro 1.5 开发了一款 AI 智能体。该智能体能够与公司内部部署的 SAP ERP 系统进行交互,员工可以使用自然语言提出各种问题,从而简化信息查询流程。

RTE+AI 潜在场景:

  • AI 驱动的电力系统远程维护与故障诊断: 现场工程师通过 RTC 视频与远程专家协作,AI 分析现场视频和设备数据,辅助专家进行故障诊断和维护指导。

3.拜耳作物科学公司:智能农业监控平台 Climate FieldView

拜耳作物科学公司(Bayer Crop Science) 开发了 Climate FieldView,这是一个全面的农业平台。它整合了超过 250 层数据以及数十亿个数据点,并利用人工智能提供建议,帮助农民优化田地设计和监控,从而提高产量和施肥效率。此外,该平台还有助于减少碳排放。

RTE+AI 潜在场景:

  • AI 驱动的远程诊断与专家指导: 农民通过 RTC 实时视频监测农田,AI 分析作物生长情况和病虫害情况,并提供专家指导和施肥建议。
  • AI 语音识别的智能控制: 农民可以通过语音控制设备,AI 识别语音指令,并执行相应的操作,提高操作效率和安全性。

七、传媒和游戏 Media, Marketing & Gaming

AI视频平台Synthesia正在利用Google Cloud 构建下一代先进的AI模型,更逼真地复制人类形象和声音

1.金州勇士队:个性化球赛观赛解决方案

金州勇士队 (The Golden State Warriors) 将其所有数据整合到 BigQuery 统一数据平台中,以便该球队能够利用 Vertex AI 构建内容推荐引擎,为球迷提供相关且个性化的内容,包括实时比赛精彩片段、比分和统计数据,以及关于最新门票销售或其他娱乐活动的提醒。

RTE+AI 潜在场景:

  • AI 赋能的个性化直播与多视角选择: 通过 RTC 提供比赛直播,AI 自动剪辑比赛精彩瞬间,生成精彩回放,供球迷随时观看。AI 还能根据用户的偏好,推荐不同的观看视角,满足不同球迷的需求。
  • AI 增强的虚拟体验与沉浸式观赛: 通过 RTC 连接 AR/VR 设备,AI 实时渲染比赛画面,为球迷提供身临其境的观赛体验。

2.彭博社:智能博物馆语音导览

彭博社(Bloomberg) 利用 Gemini 技术创建沉浸式语音导览,从而提升博物馆对视障人士的无障碍体验。

RTE+AI 潜在场景:

  • AI 语音合成的信息解读: AI 可以将展品的文字介绍、图片描述等信息转化为语音,帮助视障人士了解展品内容。
  • AI 智能回复的实时问答: 参观者可以通过 RTC 向 AI 助手提问,AI 从知识库中查找答案,并以语音形式回复,帮助视障人士了解展品。

3.Synthesia:个性化形象定制的 AI 视频平台

Synthesia 是一家运营 AI 视频平台的初创公司,该公司正在利用 Google Cloud 构建下一代先进的 AI 模型,这些模型能够逼真地复制人类形象和声音。此外,Synthesia 还在使用 Gemini 模型,以高速和高精度处理复杂的视觉和语言任务。

RTE+AI 潜在场景:

  • AI 驱动的虚拟形象实时互动与内容创作: 用户可通过 RTC 创建自己的虚拟形象,AI 实时捕捉用户的表情和动作,并将其同步到虚拟形象上。用户可使用虚拟形象进行视频会议、直播互动和内容创作。

4.Formula E:赛车数据监测智能体

赋能车手的实时决策平台

Formula E 开发了其车手智能体(Driver Agent),这是一个由 Vertex AI 和 Gemini 驱动的 AI 工具。Driver Agent 旨在分析比赛期间产生的大量多模态数据,并为车手提供可操作的见解。

RTE+AI 潜在场景:

  • AI 驱动的赛车手实时数据分析: 通过 RTC 实时显示车辆状态(电量、速度、温度等)和赛道环境(天气、路况等)的关键数据,AI 分析数据的变化趋势,为车手提供直观的参考。
  • AI 连接的远程指导与策略调整: 教练可以通过 RTC 与车手进行实时语音沟通,调整比赛策略。

八、公共服务与非盈利组织 Public Sector & Nonprofits

Bower将AI集成于服务中鼓励用户进行回收

1.Beyond 12:大学生对话式 AI 辅导工具

Beyond 12 公司在 Gemini 1.0 Pro 的帮助下开发了一款 AI 驱动的对话式辅导工具。该工具旨在服务于来自资源匮乏社区的首代大学生(指家中第一代上大学的学生)。这款 AI 工具能够与学生互动,了解他们的背景和目标,解答疑问,并以个性化的方式评估他们的进展,且不会将他们与他人进行比较。

RTE+AI 潜在场景:

  • AI 驱动的远程辅导与个性化指导: 学生可以通过 RTC 与 AI 虚拟导师进行视频交流,AI 分析了解学生的需求和目标,并提供个性化的学习建议。
  • AI 提供支持的心理疏导: AI 可以识别学生的情绪风险,及时进行心理疏导,缓解学生的焦虑和压力。

2.Bower:智能回收 APP

瑞典初创公司 Bower 开发了一款应用程序,通过游戏化的方式鼓励用户进行回收,并在北欧和英国地区为用户提供奖励。该公司已将生成式 AI 技术集成到该服务中,以便用户更轻松地识别可回收物品,并将其输入到应用程序中。

RTE+AI 潜在场景:

  • AI 驱动的视觉交互与智能物品识别: 用户可以通过 RTC 调用手机摄像头,AI 实时扫描物品,自动识别物品类型和可回收性,并通过 AR 技术在屏幕上叠加回收指导信息,如正确的投放方式、回收点位置等。

3.明尼苏达州车辆管理局:智能实时翻译方案

明尼苏达州车辆管理局(Division of Driver and Vehicle Services) 利用双向实时翻译技术,帮助非英语使用者获得驾照和其他相关服务。(客户智能体)

RTE+AI 潜在场景:

  • AI 驱动的实时翻译: 通过 RTC 提供实时双向翻译服务,帮助非英语使用者顺利完成驾照考试。例如在填写表格时,AI 可以实时将表格内容翻译成用户的语言,帮助用户准确填写信息。

九、零售 Retail

美国快餐巨头Wendy’s 推出Wendy’s FreshAI来优化点餐服务

1.BrainLogic:智能购物 AI 助手 Zapia

BrainLogic 在 Vertex AI 平台上使用 Anthropic 的 Claude 模型推出了 Zapia。Zapia 是一款个人 AI 助手,旨在满足拉丁美洲市场对会话式商务的偏好。Zapia 为数百万用户提供产品发现、本地商家搜索和购买辅助等功能,并获得了超过 90% 的积极用户反馈。

RTE+AI 潜在场景:

  • AI 驱动的远程购物助理: 用户通过 RTC 视频与 AI 购物助理互动,AI 根据用户的历史购买记录、浏览行为和实时对话内容,推荐更符合用户需求的商品。
  • AI 增强的视觉交互与场景化购物: 用户可以通过 RTC 调用手机摄像头,拍摄商品或场景照片,以便 AI 助理更好地理解需求并提供建议。例如用户可以展示家中环境,AI 根据照片提供家居搭配建议,并推荐合适的家具和装饰品。

2.台湾家乐福:AI 侍酒师

台湾家乐福 的 AI 侍酒师是一项集成在其应用程序中的对话式 AI 服务,旨在帮助顾客根据个人喜好选择葡萄酒。该服务由 Gemini 模型驱动,利用庞大的葡萄酒数据库提供个性化的推荐,从而无缝衔接线上和线下购物体验。

RTE+AI 潜在场景:

  • AI 识别酒标的便捷信息获取: 顾客可以通过 RTC 调用摄像头,拍摄葡萄酒酒标,AI 自动识别酒款信息,并提供详细的介绍和评价。
  • 个性化葡萄酒推荐与品鉴指导: 顾客通过 RTC 视频与 AI 侍酒师互动,AI 根据用户的口味偏好和餐饮搭配推荐葡萄酒,并提供品鉴指导。

3.家得宝:家庭装修智能体 Magic Apron

家得宝 (The Home Depot) 构建了 Magic Apron,这是一个 AI Agent,可以全天候提供专业指导,包括详细的操作指南、产品推荐和评价摘要,从而简化家庭装修流程。

RTE+AI 潜在场景:

  • AI 驱动的远程装修指导与材料选购: 用户通过 RTC 视频与 AI 装修专家互动,AI 分析用户房屋结构和装修需求,并提供材料选购建议和施工指导。
  • AI 个性化的装修方案推荐与虚拟预览: 用户可以通过 RTC 分享房间照片或装修风格偏好,AI 识别用户喜好,推荐个性化的装修方案, 并实时渲染效果图,让用户提前看到装修效果。

4.Wendy’s:智能点餐解决方案

Wendy’s Fresh AI 将 Gemini 的对话式 AI 能力与音频和视觉元素相结合,为 Wendy’s 的顾客打造高度个性化和定制化的体验,确保体验的一致性和愉悦性。同时,它也让员工能够专注于提供卓越的服务和餐食准备,标志着快餐餐厅的下一个发展阶段。

RTE+AI 潜在场景:

  • AI 驱动的个性化点餐指导与沉浸式菜单: 通过 RTC 向顾客展示视频菜单,AI 根据时间、天气、顾客偏好等因素,动态更新菜单内容,推荐特色菜品和优惠套餐。
  • AI 辅助的互动问答: 客户通过手势或语音与动态菜单进行互动,AI 实时响应,完成点餐和支付。

十、技术 Technology

Flockx致力于通过AI技术帮助用户建立真实世界的社交联系

1.Abstrakt:支持情绪识别的智能联络中心解决方案

Abstrakt 公司利用 Vertex AI 技术,通过实时转录通话内容和评估用户情绪,来提升联络中心客户的体验。这使得呼叫中心工作人员能够进行更高效的对话,更快地解决问题,并提供更优质的客户服务。

RTE+AI 潜在场景:

  • AI 驱动的情绪识别与智能客服调度: AI 实时分析客服通话中的用户情绪,并根据情绪状态智能调度客服资源,优先处理情绪激动的用户。

2.Flockx:智能社交解决方案

Flockx 致力于消除人们的孤独感。他们利用基于 Google Cloud 和 Elastic 构建的协作式 AI 代理技术,将个人与各种活动、社群以及志同道合的人联系起来。

RTE+AI 潜在场景:

  • AI 实时匹配兴趣相投的伙伴: AI 根据用户的兴趣爱好、技能特长等信息,实时匹配合适的伙伴,方便用户进行交流和合作。
  • AI 驱动的活动体验与沉浸式参与: 用户在匹配成功后可以通过 RTC 连接 VR 设备,参与虚拟现实活动,如演唱会、展览会等,获得身临其境的体验。

3.Gojek:智能支付语音助手

Gojek ,总部位于印度尼西亚的超级应用,推出了「Dira by GoTo AI」,这是一款印尼语 AI 语音助手,集成在其 GoPay 服务中。用户可以通过语音指令操作,无需打字和滚动,即可用更少的步骤完成账单支付和转账等任务。

RTE+AI 潜在场景:

  • AI 增强的语音支付与安全验证: 用户通过 RTC 语音指令完成支付操作,AI 进行声纹识别和人脸识别,确保支付安全。
  • AI 辅助的客服支持与个性化帮助: 用户可以通过 RTC 向 Dira 提问,AI 助手会从知识库中查找答案,并以语音形式回复,快速解决支付问题。

十一、电信 Telecommunications

加拿大贝尔公司为其商业客户构建可定制的联系中心解决方案

1.加拿大贝尔公司:可定制的联络中心解决方案

加拿大贝尔公司(Bell Canada) 为其商业客户构建了可定制的联络中心解决方案。该方案提供由 AI 驱动的智能客服,用于接听来电。同时还提供「智能助手」(Agent Assist)功能,该功能在人工客服上线时进行监听,并提供建议和情绪分析。AI 的应用已经为客户运营节省了 2000 万美元的成本。

RTE+AI 潜在场景:

  • AI 辅助的智能客服与问题诊断: AI 智能客服通过 RTC 视频为用户提供在线支持,并根据用户问题类型进行智能分流。如 AI 无法解决问题,可将用户无缝转接至人工客服,并共享会话记录和分析结果。
  • AI 驱动的情绪管理与主动关怀: 通过 RTC 视频通话,AI 实时分析客户面部表情和语音语调,准确识别客户情绪状态,并自动向客服人员发送关怀提示,帮助客服人员提供更贴心的服务。

2.意大利电信:AI 语音助手

意大利电信(TIM) 部署了一款由 Google 提供技术支持的语音助手,用于处理大量客户来电,效率提高了 20%。

RTE+AI 潜在场景:

  • AI 驱动的个性化服务推荐与业务办理: AI 分析用户的使用习惯和消费行为,并通过 RTC 视频向用户推荐个性化的服务套餐。用户可通过 RTC 在线办理业务,无需前往营业厅。
  • AI 辅助的可视化服务与直观问题解决: 用户可以通过语音助手发起视频客服请求,AI 自动识别问题类型,并将用户连接到相应的客服人员或专家。

3.巴西电信:客户服务质量优化方案

巴西电信(TIM Brasil) 利用 Google Cloud 的生成式 AI 技术,将客户服务通话录音转录成文本,然后以越来越高的精度对客户需求进行分类、总结和评估。该解决方案可以协助客服人员的工作,并为团队提供关于最佳实践的反馈。

RTE+AI 潜在场景:

  • AI 驱动的客户服务质量监控与流程优化: AI 分析 RTC 通话录音和文本数据,评估客服服务质量,并发现服务流程中的瓶颈。

原文链接:https://cloud.google.com/transform/101-real-world-generative-...

课代表留言:感谢 Gemini 对本文脑洞的大力支持🫰期待早日见到 Gemini 老师预判的未来 👀

更多 Voice Agent 学习笔记:

级联vs端到端、全双工、轮次检测、方言语种、商业模式…语音 AI 开发者都在关心什么?丨Voice Agent 学习笔记

a16z 最新报告:AI 数字人应用层即将爆发,或将孕育数十亿美金市场丨 Voice Agent 学习笔记

a16z合伙人:语音交互将成为AI应用公司最强大的突破口之一,巨头们在B2C市场已落后太多丨Voice Agent 学习笔记

ElevenLabs 33 亿美元估值的秘密:技术驱动+用户导向的「小熊软糖」团队丨Voice Agent 学习笔记

端侧 AI 时代,每台家居设备都可以是一个 AI Agent丨Voice Agent 学习笔记

世界最炙手可热的语音 AI 公司,举办了一场全球黑客松,冠军作品你可能已经看过

多模态 AI 怎么玩?这里有 18 个脑洞

AI 重塑宗教体验,语音 Agent 能否成为突破点?

对话 TalktoApps 创始人:Voice AI 提高了我五倍的生产力,语音输入是人机交互的未来

a16z 最新语音 AI 报告:语音将成为关键切入点,但非最终产品本身(含最新图谱)

在这里插入图片描述


RTE开发者社区
668 声望976 粉丝

RTE 开发者社区是聚焦实时互动领域的中立开发者社区。不止于纯粹的技术交流,我们相信开发者具备更加丰盈的个体价值。行业发展变革、开发者职涯发展、技术创业创新资源,我们将陪跑开发者,共享、共建、共成长。