Gemini 升级任务模式 可代订日程并完成支付

原标题:Put Gemini to work for you
78AI 研判分

Google 将 Gemini 从对话助手升级为可执行任务的智能体,通过接入用户的邮件、日历与支付方式,代用户完成预约、账单管理与购物等操作。相关能力运行在硬件隔离的虚拟机中,用户可在 Gemini 应用内切换至 Task 模式或通过短信、邮件转发触发。

报道正文

本文目录7 个章节

Gemini 现在可以拨打电话、支付账单,并完成你的任务。



一个用户界面,显示提示语“我能为你完成什么?”位于一个输入框上方,输入框内含有占位文本“描述一项任务”。

你的浏览器不支持音频元素。

听文章 [[duration]] 分钟

我们正在升级 Gemini,使其能够处理诸如预约、管理账单和购买杂货等复杂任务。通过连接你的电子邮件、日历和支付方式,Gemini 能为你节省时间,同时将你的数据安全地保存在隔离环境中。你今天就可以在 Gemini 应用中把开关从“聊天”切换到“任务”、在 Android 或 iOS 上给我们发短信,或将电子邮件转发至 [email protected] 来试用这些新功能。

摘要由 Google AI 生成。生成式 AI 仍处于实验阶段。

  • Labs 副总裁 Josh Woodward 宣布,Gemini 现在可以为你管理日常任务。
  • 你可以使用 Gemini 通过集成服务预约、分析水电费账单以及购买商品。
  • Gemini 在安全的硬件隔离虚拟机中运行,以保护你的私人数据和账户信息。
  • 你可以通过在 Gemini 移动应用中切换任务模式来使用这些新功能。

摘要由 Google AI 生成。生成式 AI 仍处于实验阶段。

Gemini 应用和 AI Studio 的 Labs 副总裁 Josh Woodward 解释说,Gemini 现在可以处理诸如预约、管理购物清单和分析账单等日常任务。通过连接你的 Google 应用,它能利用你现有的信息安全地完成杂务。你可以将 Gemini 应用切换到任务模式、发送短信或转发电子邮件来激活这些功能。此次更新通过管理你的日历、购物和家庭事务来帮助你节省时间。

摘要由 Google AI 生成。生成式 AI 仍处于实验阶段。

探索其他风格:

最好的助手了解你,并帮助你完成任务。今天,你可以将更多任务交给 Gemini,然后继续你的一天。我们为那些在课程、会议和接送孩子上学等日常事务中任务堆积如山的人打造了它。我们的目标是让 Gemini 为你节省时间和金钱。

从此刻起,这项更新将免费向美国、日本、韩国、加拿大、澳大利亚和印度的数亿用户推出,使用的是我们全新的 Gemini 4 Hydrogen 模型。我们还将推出一系列高级功能,首先从美国开始。

它如何改变我的日常

如果你的电子邮件、日历、密码、照片、文件和支付卡已经在 Google 生态系统中,那么 Gemini 是你作为个人助理的最佳选择,因为这些敏感数据已经安全地存放在 Google,你无需将其发送到其他地方。

以下是我如何使用它。

最近,我们的小型厢式车的检查引擎灯亮了。唉。我掏出 Gemini 对它说:“我们的小型厢式车早就该保养了。请打电话给最近的两家经销商,想办法在未来一个月左右找个周五一大早的预约时间。”

由于 Gemini 通过 Personal Intelligence 已经知道我们开的是 2019 款本田奥德赛,也知道我们住在哪里,它在 Google 地图上找到了最近的店铺,并同时打给了两家 1 。谢天谢地,我不用忍受任何等待音乐。Gemini 完成了任务,在我的 Google 日历中找到了我有空的时间,并在不到五分钟内添加了周五一大早的预约。搞定。(在经销商那边,Gemini 会立即说明自己是 AI。商家可以随时选择退出,而且除非我同意,Gemini 不会透露我的支付信息或私人账户信息。)

在后台,Gemini 同时打给了两家经销商,替我忍受了等待音乐,在只接受预约而非直接到店的店铺预约了时间,并把周五的预约放到了我的日历上,而我完全不用自己去查看。

上个月,在我们收到一张意外的 389 美元电费账单后,它为我们省下了真金白银。我授权 Gemini 通过新的 Google 密码管理器集成访问我们的公用事业门户,并要求它分析我电子邮件中的过往账单。Gemini 工作了几分钟,然后精准命中。主要元凶是我们的热泵,结果发现它大约在下午 4 点启动,正好处于高峰电价的中间时段。我和妻子自己翻 PDF 和邮件是绝对发现不了这一点的。

我也用它来处理一些小事。为了即将到来的回俄克拉荷马州的假期旅行,我最近让 Gemini 给我推荐最好的 USB-C 充电器选项。得益于 Google 的 Shopping Graph,Gemini 迅速对比了各种充电器,还追问了我关于瓦数和颜色的偏好,然后通过新的 Google Pay 集成帮我完成了结账。最棒的是:它还找到了一个折扣码,让我额外省了 10 美元。搞定。

Gemini 现在使用 Agent Payments Protocol (AP2) 来完成这类购买。我们正与 American Express(即将支持)、Mastercard 和 Visa 合作,通过受支持卡片上的数字令牌保障你的购买安全。而且当你在 Gemini 上购物时,结账过程中你仍然可以获得卡片的积分、返现或购买保护。你还可以预先设置硬性消费上限,Gemini 的设计会确保不超出你的预算。你所有的收据和物流信息都会直接进入 Google Wallet,而 Google Wallet 从今天起将扩展到 iOS 平台。接下来,我们会将 Universal Commerce Protocol (UCP) 集成到 Gemini 中,让每个人都能期待从发现商品到结账的更快、更可靠的购物体验。

Gemini 让你设置消费限额,同时仍然赚取卡片上的每一飞行里程、返现积分和福利。

Gemini 也能帮忙解决工作日的晚餐问题。最近我早上匆忙出门时,面对一个几乎空了的冰箱,通过新的 RCS 集成2给 Gemini 发了条消息:“把千层面、草莓、黄瓜和香草冰淇淋加到我们的 Instacart 订单里。”出门路上,我看到食品柜里有一个空了的 Cheerios 盒子,就拍了张照片并快速跟进了一条消息:“这个也加上。”Gemini 加上了,然后把我转交给 Instacart 完成订单。我们到家时,杂货已经放在门口了。搞定。如今,Gemini 已连接超过 60 款热门应用,作为开发者,你可以申请加入我们的 Connected Apps Platform。

我和妻子还用 Gemini 整理医疗账单、跟踪保险续保,并掌握孩子们的日程安排。本周早些时候,我把 Gmail 里的一批学校邮件转发到了 [email protected]。不到一分钟,所有日期都进了我的日历,还邀请了我妻子。更棒的是,它发现篮球训练时间有冲突,并问我要不要给另一位家长发短信,商量交换拼车接送的任务。

我们如何保护你的数据

随着 Gemini 能力不断增强,我们也在持续提升安全防御。当你给 Gemini 分配任务时,它会使用 Google Cloud 的 Agent Compute Engine,在一个专属于你账户、绝不与其他用户共享的硬件隔离虚拟机中工作。每个虚拟机都经过沙箱隔离,因此 Gemini 会在一个独立、隔离的环境中工作,而该环境会由我们的安全红队定期测试。这个沙箱只是多层防御中的一层,其他措施还包括提示注入过滤器——它会扫描搜索结果、网页等内容,并结合 Google Safe Browsing 来限制 Gemini 可以打开哪些链接。

在 Gemini 执行任务的过程中,你可以随时介入,给它更多指示;它也被设计为在关键步骤前暂停并向你确认。例如,Gemini 被设计为在点击“购买”前请求你的确认或预先批准,如果指令含糊不清,它还会提出澄清问题。对于你已经信任的日常操作,比如把那些 Cheerios 加入购物车,你可以设为“始终允许”,这样它就不会反复打扰你。

最后,我们为你提供设置和工具,帮助你保护数据与隐私。你可以随时调整任务设置、断开 Google 及第三方应用连接,或删除聊天记录。若想进一步了解我们如何实施多层纵深防御安全策略,请阅读我们的技术论文。

另外,也欢迎你通过 Google 的 AI 漏洞奖励计划(AI VRP)参与我们的漏洞赏金计划,共同提升智能体系统的安全性。

你可以如何帮助我们改进

尽管我们已对任务进行了广泛测试以尽量减少错误,但尚未完全消除所有问题。你可能会遇到任务未能完成或未达预期的情况。遇到这种情况时,请通过给回复“点踩”来提供反馈。

例如,个人助理在网页上的操作方式仍在演进,因为各网站仍在适应这些新用例。在某些网站上,Gemini 可能能完成大部分流程,然后会将屏幕交还给你来点击最后的按钮。我们正直接与主要网站和安全提供商合作,帮助网络生态演进,使其能更好地服务于网站所有者与个人助理。几十年来,机器人默认被屏蔽,因为大多数机器人是恶意的。个人助理需要更细致的处理方式,我们相信开放、可验证的标准将惠及所有人。

如何试用

准备好交办你的下一个任务了吗?打开 Gemini,将主屏幕上的切换开关从“聊天”切换到“任务”,然后告诉 Gemini 你需要完成什么。从美国开始,你还可以将邮件转发至 [email protected],或按照以下说明向 Gemini 发送短信:

  1. 在 Android 或 iOS 上打开 Gemini,点击设置
  2. 点击渠道
  3. 在通过短信使用 Gemini下点击设置
  4. 验证你的电话号码

短信和邮件设置

我们迫不及待想看到 Gemini 首先帮你从清单上划掉什么。

在收件箱中获取 Google 最新资讯

订阅我们的新闻通讯,获取产品更新、活动信息、特别优惠等更多内容。

完成。只差一步。

你也可以使用 订阅。

1

通过 Gemini 拨打电话目前在印第安纳州、路易斯安那州、明尼苏达州、蒙大拿州和内布拉斯加州不可用。

2

你必须拥有一个属于符合条件移动运营商的美国电话号码。

关于作者

Josh Woodward

Josh 领导 Google Labs、Gemini 应用和 AI Studio。他的团队专注于发现和交付新的 AI 产品,以推进 Google 的使命。他协助共同创立了 Google 的“下一个十亿用户”计划并参与创建了 Chromebook,他的工作一直专注于让技术更易于为每个人所用。