[AI Google] 在 Android 上以更多方式体验 Google AI

2024-06-09 12:28

本文主要是介绍[AI Google] 在 Android 上以更多方式体验 Google AI,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

总结

通过将 AI 直接构建到 Android 操作系统中,Google 正在重新想象用户与手机的互动方式。最新的更新包括用于家庭作业帮助的 Circle to Search、增强的 Gemini 助手功能以及通话期间的实时诈骗检测。Circle to Search 现在通过逐步指导帮助学生解决数学和物理问题,并将很快处理更复杂的问题。Gemini 变得更擅长理解上下文以帮助用户完成各种任务,并将推向数亿台设备。此外,Gemini Nano 的多模态功能将为视障用户带来更清晰的 TalkBack 描述。新的诈骗检测功能使用 Gemini Nano 在通话期间检测到诈骗模式时提醒用户。Google 致力于将 AI 集成到智能手机体验的每个部分,并鼓励开发者使用他们最新的 AI 模型和工具进行构建。


通过将 AI 直接构建到 Android 操作系统中,我们正在重新想象您与手机的互动方式。

一个 Android 吉祥物站在显示屏幕前,屏幕上显示了用于家庭作业帮助的 Circle to Search、诈骗检测警报、TalkBack 和 Gemini 的覆盖层,上面有一个按钮写着“询问此 PDF”。

我们正处于一代人的关键时刻,最新的 AI 进步正在重新发明手机能做的事情。随着 Google AI 成为 Android 操作系统核心的,数十亿 Android 用户现在可以以全新的方式与他们的设备互动。

今天,我们正在分享更新,让您在 Android 上体验 Google AI。

Circle to Search 现在可以帮助学生完成家庭作业

将 Circle to Search 直接构建到用户体验中,您可以使用简单的 gesture 搜索您在手机上看到的任何内容——无需停止您正在做的事情或切换到不同的应用程序。自三星 Unpacked 发布以来,我们已经为 Circle to Search 添加了新功能,如全屏翻译,并将可用性扩展到更多的 Pixel 和三星设备。

从今天开始,Circle to Search 现在可以帮助学生完成家庭作业,为他们提供更深入的理解,而不仅仅是答案——直接从他们的手机和平板电脑上。当学生圈出一个他们卡住的提示时,他们将获得逐步指导来解决一系列物理和数学1单词问题,无需离开他们的数字信息表或教学大纲。今年晚些时候,Circle to Search 将能够帮助解决甚至更复杂的涉及符号公式、图表等问题。这一切都归功于我们 LearnLM 努力增强我们的模型和产品以供学习。

Circle to Search 今天已经在超过 1 亿台设备上可用。计划将体验带到更多设备上,我们有望在年底前将这一数字翻倍。

Gemini 将变得更擅长理解上下文以帮助您完成任务

Android 上的 Gemini 是一种新型的助手,它使用生成式 AI 帮助您更有创造力和生产力。这种集成到 Android 中的体验正在变得更擅长理解您屏幕上的上下文和您正在使用的应用程序。

很快,您将能够在您所在的应用程序上方调出 Gemini 的覆盖层,以便更容易地以更多方式使用 Gemini。例如,您可以将生成的图像拖放到 Gmail、Google Messages 和其他地方,或点击“询问此视频”在 YouTube 视频中找到特定信息。如果您有 Gemini Advanced,您还将有“询问此 PDF”的选项,以便快速获取答案,而无需滚动浏览多个页面。此更新将在接下来的几个月内推送到数亿台设备上。

我们将继续改进 Gemini,为您提供更多与屏幕上内容相关的动态建议。

手机框架显示一个覆盖层,上面有四个图像,显示网球拍击中切片的泡菜,一个图像被拖出覆盖层以附加到短信。
手机框架显示一个覆盖层,上面的文本回答了一个关于泡菜球视频的问题。覆盖层下面的文本显示视频的标题卡,上面写着“3 分钟学会泡菜球”。覆盖层下是 YouTube 上播放的视频的一部分,显示泡菜球场。
手机框架显示一个覆盖层,上面的文本回答了泡菜球中是否允许旋转发球。覆盖层下面显示的是一个人打泡菜球的剪影,作为 PDF 的封面。

Gemini Nano 将迎来全多模态功能

Android 是第一个包括内置、设备上基础模型的移动操作系统。借助 Gemini Nano,我们能够迅速为您带来体验并完全保护您的信息隐私。从今年晚些时候的 Pixel 开始,我们将推出我们最新的模型,Gemini Nano with Multimodality。这意味着您的手机将不仅能够处理文本输入,还能够理解更多上下文信息,如视觉、声音和口语。

使用 TalkBack 获得更清晰的描述

今年晚些时候,Gemini Nano 的多模态功能将来到 TalkBack,帮助视力障碍或低视力的人获得更丰富、更清晰的图像描述。平均而言,TalkBack 用户每天会遇到 90 张未标记的图像。此更新将帮助填补缺失的信息——无论是家人或朋友发送的照片中的更多细节,还是网上购物时衣服的风格和剪裁。由于 Gemini Nano 是在设备上的,这些描述发生得很快,甚至在没有网络连接时也能工作。

在电话通话期间接收疑似诈骗的警报

根据最近的一份报告,在 12 个月的时间里,人们因欺诈损失了超过 1 万亿美元。我们正在测试一种新功能,使用 Gemini Nano 在通话期间提供实时警报,如果它检测到通常与诈骗相关的会话模式。例如,如果“银行代表”要求您紧急转移资金、使用礼品卡支付或请求个人信息,如卡 PIN 或密码,这些是不常见的银行请求,您将收到警报。这种保护完全在设备上进行,因此您的对话对您来说是私密的。我们将在今年晚些时候分享更多关于这个可选功能的信息。

红色框显示诈骗检测警报,文本写着“可能是诈骗,银行永远不会要求您移动您的资金以保持安全。”下面是“忽略并继续”或“结束通话”的选项。

Android 上还有更多

我们才刚刚开始探索设备上 AI 如何改变您的手机能做的事情,我们将继续在 Pixel、三星等每部分智能手机体验中构建 Google AI。如果您是开发者,请查看 Android Developers 博客,了解如何使用我们最新的 AI 模型和工具,如 Gemini Nano 和 Android Studio 中的 Gemini 构建。


  • 原文
  • AI 博客 - 从零开始学AI
  • 公众号 - 从零开始学AI

这篇关于[AI Google] 在 Android 上以更多方式体验 Google AI的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045178

相关文章

如何解决idea的Module:‘:app‘platform‘android-32‘not found.问题

《如何解决idea的Module:‘:app‘platform‘android-32‘notfound.问题》:本文主要介绍如何解决idea的Module:‘:app‘platform‘andr... 目录idea的Module:‘:app‘pwww.chinasem.cnlatform‘android-32

python logging模块详解及其日志定时清理方式

《pythonlogging模块详解及其日志定时清理方式》:本文主要介绍pythonlogging模块详解及其日志定时清理方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录python logging模块及日志定时清理1.创建logger对象2.logging.basicCo

C#TextBox设置提示文本方式(SetHintText)

《C#TextBox设置提示文本方式(SetHintText)》:本文主要介绍C#TextBox设置提示文本方式(SetHintText),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑... 目录C#TextBox设置提示文本效果展示核心代码总结C#TextBox设置提示文本效果展示核心代

SpringValidation数据校验之约束注解与分组校验方式

《SpringValidation数据校验之约束注解与分组校验方式》本文将深入探讨SpringValidation的核心功能,帮助开发者掌握约束注解的使用技巧和分组校验的高级应用,从而构建更加健壮和可... 目录引言一、Spring Validation基础架构1.1 jsR-380标准与Spring整合1

Android实现打开本地pdf文件的两种方式

《Android实现打开本地pdf文件的两种方式》在现代应用中,PDF格式因其跨平台、稳定性好、展示内容一致等特点,在Android平台上,如何高效地打开本地PDF文件,不仅关系到用户体验,也直接影响... 目录一、项目概述二、相关知识2.1 PDF文件基本概述2.2 android 文件访问与存储权限2.

Android Studio 配置国内镜像源的实现步骤

《AndroidStudio配置国内镜像源的实现步骤》本文主要介绍了AndroidStudio配置国内镜像源的实现步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录一、修改 hosts,解决 SDK 下载失败的问题二、修改 gradle 地址,解决 gradle

Spring中配置ContextLoaderListener方式

《Spring中配置ContextLoaderListener方式》:本文主要介绍Spring中配置ContextLoaderListener方式,具有很好的参考价值,希望对大家有所帮助,如有错误... 目录Spring中配置ContextLoaderLishttp://www.chinasem.cntene

在Android平台上实现消息推送功能

《在Android平台上实现消息推送功能》随着移动互联网应用的飞速发展,消息推送已成为移动应用中不可或缺的功能,在Android平台上,实现消息推送涉及到服务端的消息发送、客户端的消息接收、通知渠道(... 目录一、项目概述二、相关知识介绍2.1 消息推送的基本原理2.2 Firebase Cloud Me

AJAX请求上传下载进度监控实现方式

《AJAX请求上传下载进度监控实现方式》在日常Web开发中,AJAX(AsynchronousJavaScriptandXML)被广泛用于异步请求数据,而无需刷新整个页面,:本文主要介绍AJAX请... 目录1. 前言2. 基于XMLHttpRequest的进度监控2.1 基础版文件上传监控2.2 增强版多

Docker镜像修改hosts及dockerfile修改hosts文件的实现方式

《Docker镜像修改hosts及dockerfile修改hosts文件的实现方式》:本文主要介绍Docker镜像修改hosts及dockerfile修改hosts文件的实现方式,具有很好的参考价... 目录docker镜像修改hosts及dockerfile修改hosts文件准备 dockerfile 文