[AI Google] 在 Android 上以更多方式体验 Google AI

2024-06-09 12:28

本文主要是介绍[AI Google] 在 Android 上以更多方式体验 Google AI,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

总结

通过将 AI 直接构建到 Android 操作系统中,Google 正在重新想象用户与手机的互动方式。最新的更新包括用于家庭作业帮助的 Circle to Search、增强的 Gemini 助手功能以及通话期间的实时诈骗检测。Circle to Search 现在通过逐步指导帮助学生解决数学和物理问题,并将很快处理更复杂的问题。Gemini 变得更擅长理解上下文以帮助用户完成各种任务,并将推向数亿台设备。此外,Gemini Nano 的多模态功能将为视障用户带来更清晰的 TalkBack 描述。新的诈骗检测功能使用 Gemini Nano 在通话期间检测到诈骗模式时提醒用户。Google 致力于将 AI 集成到智能手机体验的每个部分,并鼓励开发者使用他们最新的 AI 模型和工具进行构建。


通过将 AI 直接构建到 Android 操作系统中,我们正在重新想象您与手机的互动方式。

一个 Android 吉祥物站在显示屏幕前,屏幕上显示了用于家庭作业帮助的 Circle to Search、诈骗检测警报、TalkBack 和 Gemini 的覆盖层,上面有一个按钮写着“询问此 PDF”。

我们正处于一代人的关键时刻,最新的 AI 进步正在重新发明手机能做的事情。随着 Google AI 成为 Android 操作系统核心的,数十亿 Android 用户现在可以以全新的方式与他们的设备互动。

今天,我们正在分享更新,让您在 Android 上体验 Google AI。

Circle to Search 现在可以帮助学生完成家庭作业

将 Circle to Search 直接构建到用户体验中,您可以使用简单的 gesture 搜索您在手机上看到的任何内容——无需停止您正在做的事情或切换到不同的应用程序。自三星 Unpacked 发布以来,我们已经为 Circle to Search 添加了新功能,如全屏翻译,并将可用性扩展到更多的 Pixel 和三星设备。

从今天开始,Circle to Search 现在可以帮助学生完成家庭作业,为他们提供更深入的理解,而不仅仅是答案——直接从他们的手机和平板电脑上。当学生圈出一个他们卡住的提示时,他们将获得逐步指导来解决一系列物理和数学1单词问题,无需离开他们的数字信息表或教学大纲。今年晚些时候,Circle to Search 将能够帮助解决甚至更复杂的涉及符号公式、图表等问题。这一切都归功于我们 LearnLM 努力增强我们的模型和产品以供学习。

Circle to Search 今天已经在超过 1 亿台设备上可用。计划将体验带到更多设备上,我们有望在年底前将这一数字翻倍。

Gemini 将变得更擅长理解上下文以帮助您完成任务

Android 上的 Gemini 是一种新型的助手,它使用生成式 AI 帮助您更有创造力和生产力。这种集成到 Android 中的体验正在变得更擅长理解您屏幕上的上下文和您正在使用的应用程序。

很快,您将能够在您所在的应用程序上方调出 Gemini 的覆盖层,以便更容易地以更多方式使用 Gemini。例如,您可以将生成的图像拖放到 Gmail、Google Messages 和其他地方,或点击“询问此视频”在 YouTube 视频中找到特定信息。如果您有 Gemini Advanced,您还将有“询问此 PDF”的选项,以便快速获取答案,而无需滚动浏览多个页面。此更新将在接下来的几个月内推送到数亿台设备上。

我们将继续改进 Gemini,为您提供更多与屏幕上内容相关的动态建议。

手机框架显示一个覆盖层,上面有四个图像,显示网球拍击中切片的泡菜,一个图像被拖出覆盖层以附加到短信。
手机框架显示一个覆盖层,上面的文本回答了一个关于泡菜球视频的问题。覆盖层下面的文本显示视频的标题卡,上面写着“3 分钟学会泡菜球”。覆盖层下是 YouTube 上播放的视频的一部分,显示泡菜球场。
手机框架显示一个覆盖层,上面的文本回答了泡菜球中是否允许旋转发球。覆盖层下面显示的是一个人打泡菜球的剪影,作为 PDF 的封面。

Gemini Nano 将迎来全多模态功能

Android 是第一个包括内置、设备上基础模型的移动操作系统。借助 Gemini Nano,我们能够迅速为您带来体验并完全保护您的信息隐私。从今年晚些时候的 Pixel 开始,我们将推出我们最新的模型,Gemini Nano with Multimodality。这意味着您的手机将不仅能够处理文本输入,还能够理解更多上下文信息,如视觉、声音和口语。

使用 TalkBack 获得更清晰的描述

今年晚些时候,Gemini Nano 的多模态功能将来到 TalkBack,帮助视力障碍或低视力的人获得更丰富、更清晰的图像描述。平均而言,TalkBack 用户每天会遇到 90 张未标记的图像。此更新将帮助填补缺失的信息——无论是家人或朋友发送的照片中的更多细节,还是网上购物时衣服的风格和剪裁。由于 Gemini Nano 是在设备上的,这些描述发生得很快,甚至在没有网络连接时也能工作。

在电话通话期间接收疑似诈骗的警报

根据最近的一份报告,在 12 个月的时间里,人们因欺诈损失了超过 1 万亿美元。我们正在测试一种新功能,使用 Gemini Nano 在通话期间提供实时警报,如果它检测到通常与诈骗相关的会话模式。例如,如果“银行代表”要求您紧急转移资金、使用礼品卡支付或请求个人信息,如卡 PIN 或密码,这些是不常见的银行请求,您将收到警报。这种保护完全在设备上进行,因此您的对话对您来说是私密的。我们将在今年晚些时候分享更多关于这个可选功能的信息。

红色框显示诈骗检测警报,文本写着“可能是诈骗,银行永远不会要求您移动您的资金以保持安全。”下面是“忽略并继续”或“结束通话”的选项。

Android 上还有更多

我们才刚刚开始探索设备上 AI 如何改变您的手机能做的事情,我们将继续在 Pixel、三星等每部分智能手机体验中构建 Google AI。如果您是开发者,请查看 Android Developers 博客,了解如何使用我们最新的 AI 模型和工具,如 Gemini Nano 和 Android Studio 中的 Gemini 构建。


  • 原文
  • AI 博客 - 从零开始学AI
  • 公众号 - 从零开始学AI

这篇关于[AI Google] 在 Android 上以更多方式体验 Google AI的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045178

相关文章

Mybatis官方生成器的使用方式

《Mybatis官方生成器的使用方式》本文详细介绍了MyBatisGenerator(MBG)的使用方法,通过实际代码示例展示了如何配置Maven插件来自动化生成MyBatis项目所需的实体类、Map... 目录1. MyBATis Generator 简介2. MyBatis Generator 的功能3

Ubuntu系统怎么安装Warp? 新一代AI 终端神器安装使用方法

《Ubuntu系统怎么安装Warp?新一代AI终端神器安装使用方法》Warp是一款使用Rust开发的现代化AI终端工具,该怎么再Ubuntu系统中安装使用呢?下面我们就来看看详细教程... Warp Terminal 是一款使用 Rust 开发的现代化「AI 终端」工具。最初它只支持 MACOS,但在 20

Python数据处理之导入导出Excel数据方式

《Python数据处理之导入导出Excel数据方式》Python是Excel数据处理的绝佳工具,通过Pandas和Openpyxl等库可以实现数据的导入、导出和自动化处理,从基础的数据读取和清洗到复杂... 目录python导入导出Excel数据开启数据之旅:为什么Python是Excel数据处理的最佳拍档

SpringBoot项目启动后自动加载系统配置的多种实现方式

《SpringBoot项目启动后自动加载系统配置的多种实现方式》:本文主要介绍SpringBoot项目启动后自动加载系统配置的多种实现方式,并通过代码示例讲解的非常详细,对大家的学习或工作有一定的... 目录1. 使用 CommandLineRunner实现方式:2. 使用 ApplicationRunne

VUE动态绑定class类的三种常用方式及适用场景详解

《VUE动态绑定class类的三种常用方式及适用场景详解》文章介绍了在实际开发中动态绑定class的三种常见情况及其解决方案,包括根据不同的返回值渲染不同的class样式、给模块添加基础样式以及根据设... 目录前言1.动态选择class样式(对象添加:情景一)2.动态添加一个class样式(字符串添加:情

MYSQL行列转置方式

《MYSQL行列转置方式》本文介绍了如何使用MySQL和Navicat进行列转行操作,首先,创建了一个名为`grade`的表,并插入多条数据,然后,通过修改查询SQL语句,使用`CASE`和`IF`函... 目录mysql行列转置开始列转行之前的准备下面开始步入正题总结MYSQL行列转置环境准备:mysq

什么是 Linux Mint? 适合初学者体验的桌面操作系统

《什么是LinuxMint?适合初学者体验的桌面操作系统》今天带你全面了解LinuxMint,包括它的历史、功能、版本以及独特亮点,话不多说,马上开始吧... linux Mint 是一款基于 Ubuntu 和 Debian 的知名发行版,它的用户体验非常友好,深受广大 Linux 爱好者和日常用户的青睐,

Linux(Centos7)安装Mysql/Redis/MinIO方式

《Linux(Centos7)安装Mysql/Redis/MinIO方式》文章总结:介绍了如何安装MySQL和Redis,以及如何配置它们为开机自启,还详细讲解了如何安装MinIO,包括配置Syste... 目录安装mysql安装Redis安装MinIO总结安装Mysql安装Redis搜索Red

Java文件上传的多种实现方式

《Java文件上传的多种实现方式》文章主要介绍了文件上传接收接口的使用方法,包括获取文件信息、创建文件夹、保存文件到本地的两种方法,以及如何使用Postman进行接口调用... 目录Java文件上传的多方式1.文件上传接收文件接口2.接口主要内容部分3.postman接口调用总结Java文件上传的多方式1

SSID究竟是什么? WiFi网络名称及工作方式解析

《SSID究竟是什么?WiFi网络名称及工作方式解析》SID可以看作是无线网络的名称,类似于有线网络中的网络名称或者路由器的名称,在无线网络中,设备通过SSID来识别和连接到特定的无线网络... 当提到 Wi-Fi 网络时,就避不开「SSID」这个术语。简单来说,SSID 就是 Wi-Fi 网络的名称。比如