谷歌AI代理：未来的创新之路如何实现？

谷歌AI代理：迈向未来的创新之路

• 谷歌似乎正在全力以赴发展AI代理。最新的谷歌云Next主题演讲涵盖了谷歌各个新产品的发展，其主题之一就是AI代理。AI代理用于客户服务，用于帮助员工更高效地完成任务，用于营销，驾驶，分析海量数据，创建内容、播客和视频，用于网络安全，编码，部署新电子商务页面，AI代理无所不在。在这段视频中，我整理了他们展示的一些重要公告和AI代理演示，让你更好地了解谷歌即将推出的产品。

• 我们今天最重要的公告集中在生成式AI上。顾客们迅速从尝试生成式AI，帮助回答问题，进行AI预测，转而构建生成式AI代理。代理同时处理多模态信息，进行对话，推理，学习和做决策。代理可以与其他代理和人类连接，它们将改变每个人与计算设备和网络互动的方式。我们的客户正在构建AI代理的早期版本。我们的基础模型Gemini拥有先进的跨模态信息推理能力。我们是唯一提供广泛使用的第一方、第三方和开源模型的云服务。Vertex AI能够访问、调整、增强和部署定制模型，并构建代理。

• 就在这次演讲之前，谷歌发布了最新的Gemini 1.5 Pro模型，拥有100万令牌上下文窗口。重要的是要明白，谷歌在AI的竞赛中似乎一直遭遇困难，但仅仅在过去几个月里，他们通过1.5 Pro模型取得了相当重大的突破。他们采用了专家混合架构，这使得该模型不同于使用相同架构的GPT-4，顺便说一句，谷歌联合变压器一起开创了这项技术。他们先驱，创造了很多这方面的技术。Open AI能够利用这些技术，更好地整合、创新、迭代，并更快地推出产品。但现在谷歌正在重新夺回这项技术，并推进他们的模型。Gemini 1.5 Pro拥有100万令牌上下文窗口，表现出色。如果你之前尝试过他们的其他产品并觉得不尽人意，也许你会对他们所声称的一些内容持怀疑态度。

谷歌AI代理：迈向未来的创新之路

探索Google的Gemini模型：下一代AI助手的未来

• 近日，谷歌宣布了一系列重大动态，其中包括推出了Gemini模型，这被视为开启了下一代人工智能助手的未来。Gemini模型的强大之处在于其能够自由流畅地进行人类般的对话，无论是文字、语音、图片还是视频，都能够实现个性化定制。

• 在Gemini模型中，我们还可以通过自然语言指令来控制对话流程，引导对话涉及特定主题，或者在必要时转接给人类代理。这种平滑的过渡，使得对话变得更加自然和高效。

• 此外，Gemini模型还可以通过基于向量和关键词搜索来提高响应质量，连接内部信息和整个网络。同时，通过扩展功能，还可以帮助客户完成诸如更新联系信息、预订航班、订餐等任务。

• 试想一下，一个拥有Gemini模型的客户代理在行动中是如何表现的。让我们以我最喜欢的商店Symbol Fashion为例。他们刚刚推出了一个客户代理，利用Gemini和向量搜索为顾客提供无缝的购物体验。

探索Google的Gemini模型：下一代AI助手的未来

利用AI助手提升电子商务的客户体验

• 在当今电子商务的竞争激烈的市场中，了解并满足客户需求是至关重要的。AI助手的崛起为提升客户体验带来了新的可能性。

• 通过Gemini的多模态推理，AI助手能够分析文本和视频，准确识别客户需求，并将其转化为可搜索的信息格式。这种智能化的服务让客户体验更加便捷、高效。

• 举例来说，当顾客想购买类似键盘手所穿的格子衬衫时，AI助手可以迅速帮助找到衬衫的款式、价格、购买途径，并更快地让顾客穿上心仪的衣物。

• 除了提供搜索和选购服务，AI助手还能根据顾客的购物历史和偏好，为他们推荐相匹配的商品，并提供优惠券、奖励积分等福利，进一步增强购物乐趣。

• 对于电子商务所有者而言，AI助手也为其业务发展带来了新的可能性。无论是个性化推荐、智能客服，还是数据分析，AI助手都能为电子商务提供更智能、更高效的解决方案。

• 当然，随着AI助手在客户服务中的应用不断深入，也需要关注其合理使用，避免对消费者造成困扰和干扰。未来，人工智能与人性化服务将如何平衡，值得我们持续关注和探讨。

利用AI助手提升电子商务的客户体验

智能AI助手：未来办公的利器

• 在时代不断发展的今天，智能AI助手已经成为办公场所的新宠。这些助手不仅帮助员工提高工作效率，同时也能帮助个人提升工作效率。有些功能着实令人兴奋。曾经不得不翻阅大量法律文件的经历，比如试图租车或公寓时，或者曾经被美国的医疗账单搞得伤透脑筋。医疗账单行业异常复杂，让人十分头痛。我不明白其中一半的操作是如何合法的，但拥有智能AI助手似乎可以大有帮助。

• Gemini for Workspace是如何帮助客户节省时间的呢？让我向您展示一个实际的例子。我被要求评估两份关于新工资系统的提案。我打开我的云盘，发现这里有两份供应商提案的工作声明。Google云盘已经做好了AI准备，无需额外的准备工作，这里的所有内容都受到我们行业领先的安全保护。我所要做的就是拖放这两个文件到Gemini边栏，这个功能目前还在预览阶段。只需几秒钟，Gemini for Workspace就会为我概述这些提案，让我对内容有一个良好的理解。我甚至可以进一步询问，比较两份提案的价格。每份文件都超过70页，要花数小时才能审核完整个文档，但是Gemini将帮助我快速找到答案，节省大量时间。如您所见，我已经在Gemini边栏中找到了答案，让我们继续深入其中一份提案。

• 选择了其中一份提案后，您会注意到Gemini for Workspace会主动为您展示该文件的摘要，让您不需要花费时间阅读整个文档就能了解大概内容。但在继续与供应商合作之前，我需要确保没有合规问题存在。说实话，我并没有把我们的合规规则书上的每一条都背下来，因为超过一百页的规则书。我就需要花时间梳理这份提案的80页，然后与一百页的规则书手动比对。因此，在边栏中，我询问，这份提案是否符合以下要求？然后@提到我们的合规规则书，按下回车键，看看Gemini会有何回应。好的，很有趣。Gemini发现了一个问题，因为供应商没有列出他们的安全认证。由于Gemini建立在我的公司数据之上，引用了特定文件的来源，我可以相信这个回应，并在选择供应商之前开始解决问题。Gemini for Workspace。

智能AI助手：未来办公的利器

AI 技术改变工作流程，提高工作效率

• AI 技术的发展正在改变各行各业的工作方式，提高工作效率。以工作空间为例，在不影响准确性的情况下，极大地节省了我的时间。这种技术还可以应用在许多其他领域。销售团队分析请求提案书，招聘人员制定面试问题等等。

• 许多客户正在打造员工代理，自动化那些繁琐重复的工作流程。美国领先的医疗服务提供商HCA Healthcare正在使用我们的生成式人工智能技术，帮助护理人员更多时间花在照顾患者身上，减少文书工作时间。他们正在测试“Katie”这个护士接班数字助手，帮助确保照护的连续性。

• 这个助手用简单易懂的语言提供总结，确保照护人员可以轻松分享信息，并及时提供最新的患者数据，加快出院流程。员工代理整合了Google Workspace、Gemini Models和Vertex AI，直接集成在Google Chat中。它通过检索增强生成引用电子邮件内容和附件作为上下文，以便更好地回应用户需求。Gemini Models的多模态能力使代理能够理解和推理来自单个提示的文本、音频和视频。

• 这样一来，信息阅读更加高效。通过AI技术，我们能够更快速地了解新的医疗计划，比较不同的覆盖方案，从而为自己的最佳选择做出决策。AI技术的应用正在让工作变得更加智能化，在这个数字化时代，它们将发挥越来越重要的作用。

AI 技术改变工作流程，提高工作效率

未来助手：让生活更便利的智能助手

• 随着科技的不断进步，智能助手正逐渐成为我们生活中不可或缺的一部分。就像Gemini模型和Vertex扩展所展示的那样，智能助手能够帮助我们处理大量来自各种来源的信息，甚至包括非结构化数据，如PDF文档。通过利用Gemini的先进推理能力，智能助手可以深入了解我当前的计划，并将其与2025年的新选择进行比较。

• 企业基础功能使我能够查看Gemini用于得出结论的确切数据，并且我可以放心地相信它的推荐。这让我想到，智能助手还可以帮我处理其他事务，比如寻找最适合我女儿的正畸医生。

• 利用Vertex扩展，Gemini模型可以与任何外部或内部API进行集成。这使智能助手可以将我的牙科保险详细信息直接与实时的Google Maps和地点数据进行整合，帮助确定附近排名最高的合作医疗提供者。

• 通过智能助手的帮助，我找到了一个提供周六预约的正畸医生，这非常适合我家庭的时间安排。接下来，我对这家医生知之甚少，但通过智能助手的摘要扫描，我了解到他们对孩子们非常友善，这让我放心选择他们。

• 通过与Google日历集成，智能助手可以找到一个合适的时间安排通话，使整个过程变得更加便捷。这种智能助手的应用让我们更少地花费时间在繁琐的任务上，解放出更多时间来做更有意义的事情。

• 接下来，新推出的Google Vids会带来更多的惊喜。类似于Google表格和Google文档，Google Vids将提供视频演示，结合AI完全自动化，这将极大地加速在线营销活动的推进。

• 总的来说，智能助手让我们每个人都能更高效地管理日常任务，帮助我们更好地利用时间，减轻我们在处理重要但乏味任务上的认知负担。未来会有更多新的技术产品推出，我们可以期待着这些创新为我们的生活带来的便利。

未来助手：让生活更便利的智能助手

AI影音創作應用程式，讓工作更輕鬆

• AI技術改變了我們的生活方式，從智能助手到影音創作，無所不在。現今，有了Gemini和Bids的AI影音創作應用程式，讓工作更輕鬆。Gemini和Bids結合了影片編寫、製作和編輯助手，讓影音創作一氣呵成。

• 使用Bids開始創作，簡單易上手。只需輸入一個提示，Gemini就會根據現有文件提供故事概要，讓您輕鬆自定義和編輯。接著，選擇一種表現風格，Bids就會展開它的魔力。

• 通過Bids，您可以輕鬆獲得第一稿，包括精美設計的完全動畫場景、相關的素材和音樂，甚至生成的劇本。您可以從Google Drive和Google Photos直接訪問媒體，添加這周拍攝的有趣影片和照片。

• 不需要任何專業的視頻技能，您就可以像製作幻燈片一樣輕鬆製作場景。而且，通過Bids，您可以根據自己的方式個性化故事，錄製自己的聲音或使用Gemini提供的預設聲音。

• 除了Bids之外，許多客戶還為他們的營銷團隊、音頻和視頻製作團隊以及所有需要幫助的創意人士構建代理人。我們提供了一個強大的平台和堆棧來構建創意代理人。首先，它採用最佳的圖像生成模型Imagine 2.0，這是我們最先進的文本到圖像技術，幫助企業創建符合其特定品牌需求的圖像。

• 其次，作為Imagine的一部分，我們現在推出了文本到動態圖像的預覽，為營銷和創意團隊提供從文本提示生成動畫圖像的功能，包括產品圖像、廣告、GIF和故事板。最後，我們自豪地宣布，Imagine生成的AI圖像的數字水印功能現已普遍推出，由Google DeepMind提供支持。

AI影音創作應用程式，讓工作更輕鬆

创意之火：Imagine 2.0的全新编辑模式

• Imagine 2.0带来了全新的编辑模式，让图像中的不必要元素轻松移除，添加新元素，扩展图像边界，创造更广阔的视野。我们将看到这款与Gemini模型合作开发的创意代理工具，Imagine 2.0的API以及Google Workspace如何助力我们。

• 首先，让我们先来感受一下品牌的外观和感觉。我们的品牌主题和风格是什么？创意代理可以分析以往的营销活动，理解我们独特的品牌风格，并将其应用于新的创意。在这种情况下，创意代理分析了超过3,000张品牌图像、描述、视频和谷歌云盘中包含的其他产品文档，总结出我们的品牌身份--大胆、富有冒险精神、富有抱负。这正是我们追求的外观和感觉。

• 接下来，我将利用Imagine动态生成我们帐篷在标志性的户外场景中的惊艳新图像。马丘比丘、半圆顶，这些都是真实的地标，被精确呈现。现在，让我们一起创作一个故事情节，真正帮助我们传达信息。创意代理利用Gemini Pro的多模式能力来构思与每张照片匹配的创意标题。这些看起来也很棒。

• 接下来，让我们为不那么有经验的露营者准备一些内容。同时为Symbol Outfitters播客提供内容。还有为社交媒体准备更具视觉冲击力的内容。让我们从新的故事情节开始。你可以看到，这是一个为新的观众准备的图片、新标题和新故事情节，面向那些愿意放松露营的人群。看起来相当轻松愉快。现在，让我们生成那期播客。

• Gemini模型的复杂推理让我能够通过单一提示生成剧本和音频片段。我们要求代理以SSML（语音合成标记语言）创建播客剧本，然后将输出传递给我们的文本转语音API。结果将是一期讨论帐篷的节目，其中有两个人在讨论。我们可以扩展脚本的内容，但让我们先来听一部分。

创意之火：Imagine 2.0的全新编辑模式

生成素材：AI改变软件开发游戏规则

• AI技术的发展已经开始在各行各业引起革命性的变革，特别是在软件开发领域。通过科技公司的不懈努力，如今我们可以看到各种AI辅助工具的应用，带来了前所未有的生产力提升。

• 有一种新的生成图像能力即将改变我们的生活，让创作变得更加高效。过去要拍摄精美的图片内容可能需要数天甚至数周的时间，但现在有了Imagine公司的文本生成图像能力，仅需几分钟就可以完成。这种创新展示了谷歌的生成式AI技术如何轻松、无缝地制作定制内容，让创作变得更加轻松而有趣。

• 在软件开发领域，AI也正发挥着越来越重要的作用。各大公司纷纷将生成式AI技术应用于编码过程中，以提高开发效率。例如，谷歌最新推出的Gemini 1.5 Pro模型拥有一百万令牌上下文窗口，并具有智能编码、测试和提供建议的能力。这无疑是一个全新的游戏规则，将为软件开发领域带来颠覆性的变革。

• 而对于新手开发者来说，Gemini Code Assist的升级更是意义重大。集成了Gemini 1.5 Pro的强大功能，为编码带来巨大突破，让你能够在整个代码库中执行大规模更改。这将彻底改变软件开发的方式，让编码过程更加高效和简便。

• 总的来说，AI技术的进步正在改变着我们的工作方式和生活方式。无论是生成图像能力还是编码辅助工具，都将成为未来软件开发领域的重要支持，带来更多创新和效率提升。作为行业从业者，我们也要不断学习和适应这些新技术，才能与时俱进，抓住机遇。

生成素材：AI改变软件开发游戏规则

Gemini Code Assist: 代码智能助手的创新应用

• Gemini Code Assist是一款可以帮助团队提高生产效率的全新工具。作为团队的新工程师，我可以比以往更有效率地完成工作，并且仅需几分钟时间。这得益于Gemini的代码转换功能具备对整个代码库的意识，使我们能够轻松地理清整个代码库。与其他模型相比，它们无法处理超过12至15,000行的代码。而即便能够处理，它们也难以做到完美。Gemini在Code Assist中非常智能，我们只需要提供业务需求，包括视觉设计，它就能快速地进行推理。

• Gemini Code Assist开始推理需要进行的代码更改，并提供了团队成员可能会有的见解和经验。例如，我们要求Gemini在主页上添加一个“为您推荐”栏目，并附上未来状态的图片以展示改进的设计。几乎立即，Gemini Code Assist开始推理需要进行的代码更改，并有自己的见解和经验。由于我们要求Gemini Code Assist更改推荐服务，它能够找到推荐函数并提取出所需的确切细节以调用推荐服务。它突出显示需要更改的文件，并揭示其推荐背后的推理，利用我们自己的代码库作为背景。

• Gemini Code Assist不仅仅建议代码编辑，它提供清晰的建议，并确保所有这些建议都符合符号解析器的安全和合规要求。在Code Assist中，我们还添加了应用编辑的选项，这让作为开发人员的我能够掌控全局。

• 让我们看看Gemini Code Assist在我们的代码库中进行的源代码更改。看起来我们对两个文件handlers.go和home.html进行了多次编辑。甚至Gemini Code Assist还将这些更改应用于整个存储库。回想一下，仅仅阅读所有这些文件都需要我超过70小时的不间断工作。与任何代码更改一样，我的下一步是通过在本地测试修改后的应用程序来检查工作。让我们试一试。

• “为您推荐”栏目正是我们的营销团队所要求的。作为一名新开发人员，我在第一天就能做出有意义的贡献。总结一下，在背后，Gemini已经分析了我在GitLab中的整个代码库，实现了一个新功能，并确保所有生成的代码

Gemini Code Assist: 代码智能助手的创新应用

AI 数据代理：探索数据智能的未来

• 随着AI技术的不断发展，数据分析和处理变得更加高效和全面。Gemini Code Assist是一款颠覆性的工具，让我们能够更方便地处理海量数据。回顾OpenAI推出的Code Interpreter，现在被称为Advanced Data Analytics，我深信这标志着数据智能化的新时代的到来。

• 使用Code Interpreter时，我被它的强大功能所震撼。我可以上传数千条客户订单的大型Excel电子表格，然后直接向它提问。只需用自然语言提出问题，比如询问所有客户的生命周期价值，或者按不同部分进行分割的生命周期价值，Code Interpreter就会迅速给出答案。数据理解突然变得更加简单，更容易。

• 不到一年的时间，Google就推出了数据代理，帮助像沃尔玛这样的公司利用数据代理为客户服务。Bear利用BigQuery和Vertex AI开发数字医疗解决方案，减少药物开发时间，简化监管文件的制作。News Corp利用Vertex AI搜索涵盖30,000个信息源以及每天更新的25亿条新闻文章。

• 我们的数据代理可以实时监测关键绩效指标，并从企业数据中不断检测异常和趋势。它能够深入研究云端鞋销售在客户分部和地域上的热力图。数据代理使用Looker数据语义层，为企业数据和数据定义提供可信赖的答案，甚至到地域和客户段。

• 此外，数据代理还可以帮助发现需求与其他核心业务指标的相关性，找出异常。我可以轻松深入研究接下来三个月的供需情况。我们的数据代理现在正在利用BigQuery的机器学习功能建立模型。数据代理的发展展示了数据智能化的前景，让我们更好地掌握和应用数据，开创未来的智能化世界。

AI 数据代理：探索数据智能的未来

未来的AI安全战略：保护您的数据免受网络攻击

• 随着AI技术的不断发展，网络安全已成为人们关注的重要议题。在现今这个充满潜在网络攻击风险的时代，保护个人和机构的数据安全显得尤为重要。正如人们担心网络安全被攻击的风险不断增大，一些专家也在警告着我们必须提升网络安全水平以抵御潜在的网络威胁。

• 过去，我们在线分享的一些随意数据可能并不会对我们造成太大伤害。然而，随着AI技术的发展，黑客们利用大量数据进行攻击的可能性也越来越高。他们可以通过AI和神经网络处理这些数据，挖掘出对我们有害的信息，构成一种新型的网络攻击方式。因此，加强网络安全防护变得至关重要。

• 谷歌提出了一种全新的安全策略，通过安全代理AI智能系统全天候工作，帮助用户发现和抵御潜在的网络攻击。这种类似安全代理的AI系统将在未来十年迅速崛起，成为网络安全领域的热门需求。这些智能系统将在防范、检测和应对网络威胁的各个阶段为用户提供支持，从而构建一个全方位的安全生态系统。

• 除了威胁情报方面的支持，谷歌还致力于培训超过20万专业人士，推动普及和应用AI技术在网络安全领域。我们正处在行业发展的关键时刻，共同开创基于开放平台的新一代AI安全体系，并重塑基础架构以支持其发展。未来，随着AI技术的不断进步，我们将迎来一个全新的网络安全时代。

• 总的来说，网络安全已经成为当今社会不可忽视的问题。借助先进的AI技术与智能系统，我们有信心保护个人与机构的数据安全，确保网络空间的稳定与安全。让我们共同努力，迎接未来的挑战，建设一个更加安全和可靠的网络环境。

未来的AI安全战略：保护您的数据免受网络攻击

Conclusion:

谷歌的AI代理技术将引领未来的科技创新，改变人们与计算设备的互动方式。随着AI技术的不断发展，我们期待看到更多智能化的解决方案。

Q & A