Gemini 和 Google AI 的哪些功能值得我们期待？

在过去一年左右的时间里，谷歌在其面向消费者的应用程序中预览了许多 Gemini 品牌的人工智能功能。 以下是已宣布的所有内容以及可能的发布时间。

像素

2023 年底，Pixel 8 Pro 宣布了 Zoom Enhance，它可以“智能地填充像素之间的间隙并预测精细细节”。 谷歌利用设备上的“自定义生成人工智能图像模型”，称该功能在您忘记缩放时非常有用。

这是生成式人工智能的一个令人惊叹的应用，为照片取景和编辑开辟了许多可能性。 因此，您在科幻小说中看到的变焦功能就在您手中的手机中。

十月份，谷歌表示该功能“稍后推出”。 在为 Pixel 手机推出三项新功能后，该功能还没有到来。 目前尚不清楚谷歌所指的型号是否是具有多模态功能的 Gemini Nano。 目前，该功能可能会在 Pixel 9 Pro 上首次亮相，作为这款手机的主要摄影功能。

谷歌之家

在 Google Home 应用程序中，生成式人工智能将用于将事件总结为“最近发生的事情的简化视图”。 这个“快速简单的摘要”将利用要点，同时您还可以通过对话方式“询问您的家”来查找视频历史剪辑并获得自动化。 “测试版功能”将于 2024 年向 Nest Aware 订阅者提供。

菲比特

Fitbit 实验室将允许 Fitbit Premium 用户测试实验性人工智能功能并提供反馈。

这些功能中包括一个聊天机器人，它允许您以自然的对话方式询问有关 Fitbit 数据的问题。 这种考虑到健身目标的“个性化辅导”旨在生成“可操作的信息和指导”，其响应可以包括个性化蓝图。

• “例如，您可以更深入地了解您获得的活跃区间分钟数 (AZM) 以及它们与您从睡眠中恢复的程度之间的关系。”
• “这个模型也许能够分析你的睡眠模式和睡眠质量的差异，然后根据这些见解提出如何改变运动强度的建议。”

在幕后，这得到了 Fitbit 和基于 Gemini 构建的 Google Research 的新个人健康法学硕士的支持。 从 3 月份开始，“今年晚些时候”将向“有限数量的 Android 用户在 Fitbit 移动应用程序中注册 Fitbit Labs 计划”。

谷歌图片

通过“询问照片”功能，您可以询问有关图库中的照片和视频的问题。 与图像搜索不同，它可以提取信息并为您提供文本答案。 双子座驱动的查询包括“向我展示您去过的每个国家公园的最佳照片”和“我们在莉娜的生日聚会上讨论了哪些主题？” 它们可用于“推荐最好的照片”并为其创建标题。 “询问照片”是一项即将推出的“测试版功能”，谷歌已经暗示未来将提供更多功能。

Gmail + Google Workspace

在 Android 和 iOS 版 Gmail 中，您会在右上角找到一个 Gemini 按钮，可让您调出相当于侧面板的移动设备，用于输入完整的提示。 Gmail 还获得了上下文智能回复，可提供更加个性化、详细且准确的建议。 该版本将于 7 月在 Workspace Labs 发布。

在 4 月份的 Cloud Next 2024 会议上，谷歌还展示了 Help me write in mobile Gmail 应用程序的语音命令功能。 与此同时，即时优化功能将“一键将原始笔记变成完整的电子邮件”。

在桌面网络上，侧面板在 Gmail、Google Drive 和文档/表格/幻灯片中可用。 然后 Gemini 会来到 Google Chat 中总结对话并回答问题。

谷歌地图

去年二月，谷歌宣布其地图将使用法学硕士来支持其“询问”聊天机器人。 您可以使用它来查找与您的主张相符的地点以及支持后续问题。 它由用户提交的有关 2.5 亿个地点、照片、视频和评论的详细信息提供支持。

铬

Gemini Nano 现已加入 Chrome 桌面浏览器，以支持“帮助我打字”等浏览器功能。 它应该可以在大多数现代笔记本电脑和台式机上使用。

谷歌搜索

随着人工智能概述的推出，谷歌还预览了搜索实验室首次推出的许多即将推出的功能：

• 您将能够获取原始的人工智能概述并使其“更简单”（只需几句话）或“分解它”（更长的响应）。
• 多步推理功能将允许您一步提出一个复杂的问题，而不是将其分解为多个查询。
• 计划膳食和旅行
• 由人工智能组织的搜索结果页面
• 视频搜索：录制视频并提出相关问题

安卓

Gemini Nano 多媒体应用程序将于“今年晚些时候”在 Pixel 上推出，并将支持设备上/离线 TalkBack 描述等功能，以及监听来电以揭示模式的实时欺诈警报。 谷歌将在今年晚些时候分享更多细节。

在 I/O 2024 上，谷歌还预览了 Android 上的 Gemini 将很快拥有覆盖面板，而不是打开全屏 UI 来显示结果。 除了维护上下文之外，这还允许您将生成的图像拖放到对话中。 对于 Gemini Advanced 订阅者，“询问此视频”和“询问此 PDF”按钮将分别观看 Gemini 视频和文档。 这将在“未来几个月”推出。 此外，您将使用 Gemini Nano 的多媒体动态建议来了解屏幕上的内容：

例如，如果您在有关棒球的对话中激活双子座，建议可能包括“搜索我附近的棒球俱乐部”和“初学者棒球规则”。

另一个在移动设备上特别有用的附加组件是适用于 Google 日历、任务和 Keep 的 Gemini 扩展。 这将允许您拍摄包含几个即将到来的日期的页面的照片，双子座将能够将其转化为日历事件。 在接下来的几个月中，Utilities 将允许 Gemini 移动设备访问 Android 上的手表应用程序。

我们还在等待今年夏天 Gemini 移动应用程序登陆 Pixel 平板电脑。

双胞胎

直播将让您与双子座进行双向对话。 为了使体验更加自然，双子座将返回简短的回复，您可以打断这些回复以添加新信息或要求澄清。 你可以从 10 种不同的声音中进行选择，谷歌认为 Gemini Live 对于面试准备或演讲排练很有用。 它将在“未来几个月”向 Gemini Advanced 会员开放。

今年晚些时候，Gemini Live 应用程序将允许您打开实时相机模式。 只需指向现实世界中的某件事并提出有关它的问题即可。 这是通过 Astra 项目完成的。

Gems 是 Gemini 的个性化版本，可让您拥有“健身房伙伴、副主厨、编码伙伴或创意写作指南”。 Gemini 高级会员将能够创建自定义会员，而所有用户都可以访问预制的宝石，例如学习教练。

简单地描述你希望你的核心做什么以及你希望它如何反应——例如“你是我的跑步教练，给我一个每日跑步计划，并保持积极、乐观和积极的态度。” Gemini 将接受这些说明，然后单击一下即可对其进行增强，以创建满足您特定需求的 gem。

Gemini Advanced 用户还将获得一个“综合规划器”，它不仅仅是建议活动，还会考虑旅行时间和停靠点以及人们的兴趣，以创建详细的行程。 Gemini 将使用您的 Gmail 航班/旅行详细信息、Google 地图推荐您酒店附近的美食和博物馆，并搜索其他活动。