最近半年 all in A.I.，朋友们一直在让我做一下总结和分享。昨天在@yusen 的场地支持下，和一帮产品人共同探索了 S

最近半年 all in A.I.，朋友们一直在让我做一下总结和分享。昨天在@yusen 的场地支持下，和一帮产品人共同探索了 Stable Diffusion 的底层原理以及发展历程。后半部分还有这半年自己学习 AI 的方法和感悟，希望对各位产品、运营、设计等非研发岗的朋友们能有帮助。

国外资深科技记者：Google I/O大会不接地气 根本听不懂

国外资深科技记者：Google I/O大会不接地气 根本听不懂 以下为文章内容摘要：在近13年的科技记者生涯中，在参加完今天的谷歌2024年I/O大会后，我从未感受到如此强烈的“信息压迫”。从Gemini、Gemma和Gem，到Veo、 Astra和Learn LM，谷歌抛出了太多的东西，我相信我不是唯一一个感到头晕目眩的人。如果我，一个努力保持在科技报道前沿的人，仍在试图完全理解刚刚发生的这一切，那么这对普通的消费者来说并不是一个好兆头，他们只是希望能轻松地知道谷歌的AI将如何帮助他们。在这里，我也不准备把谷歌发布的所有信息都整理出来。毕竟，CNET拥有一支专业的作者团队，他们已经在这样做了。但我确实认为，在谷歌进一步成为“AI为先”的科技巨头的过程中，这是它需要解决的一个问题。Google I/O基本上是开发人员的活动。它是为程序员、研究人员和应用程序创建者准备的，他们中的大多数人都已经熟悉了“令牌”和“大型语言模型”等术语。因此，从某种程度上讲，谷歌周二给出的大量专业信息和技术术语也在意料之中。但同时，谷歌也需要迎合消费者。它需要让像我和你这样的普通用户对其产品的潜力感到兴奋，并帮助我们准确地了解它们将如何融入我们的生活。我是一名科技记者，也是一个普通的科技迷；我是一个手机用户，安卓和iOS都在用；我使用Gmail、Google Drive、Docs和地图；我还是一名摄影师和YouTube频道主持人。可以说，谷歌今天发布的所有内容，在某种程度上都与我生活的某个部分有关。但直到现在，我仍在努力理解它们是什么，更不用说它们能做什么了。Project Astra和Gemini是一样的吗？或者是Gemma？它们都与Learn LM有关吗？还是其他什么东西？他们会取代谷歌助手（Google Assistant）吗？现在，我真的不知道，我的工作很大一部分就是理解所有这些东西，并把它们分享给大家。因此，在接下来的几个小时里，我将花很多时间阅读我的同事们关于这方面的文章，如果你对谷歌的AI努力感兴趣，那么我鼓励你也这样做。但我不喜欢仅仅为了理解基本知识而不得不进行深度阅读。我坚信永远不要读产品手册，如果你不得不读，那么这个产品的可用性就失败了。这就是我对今天的谷歌主题演讲的感受。老实说，我不能把所有的责任都归咎于谷歌。AI的到来和发展如此之快，尤其是生成式AI，以至于我发现自己有点格格不入了。去年，谷歌谈论的是Bard，而现在已经不是，变成了Gemini。这就像我第一次开始使用区块链（blockchain）这样的术语时的感觉，说实话，我现在仍然不能告诉你们区块链是什么。我们有ChatGPT，三星的Galaxy AI，Meta AI，以及基于AI的新设备的到来，如Rabbit R1和Humane AI Pin。AI正在进行着如此之多的研究，但对于AI一词的确切应用，似乎还没有达成多少共识。结果是一种真正的支离破碎和困惑的感觉。朋友和家人经常问我关于AI的问题，关于他们应该使用哪种聊天机器人，以及如何创建生成式AI图像。除了向他们推荐CNET的AI Atlas之外，我很难给出有意义的答案。谷歌和所有科技公司一样，需要我们这些消费者来理解这些东西。如果他们希望我们对它们的产品感到兴奋，就需要让我们知道，这些AI工具是什么，它们具有多大的变革性。如果我们对它们感到兴奋，可能就会购买它们。例如，也许我们会购买下一代Pixel手机，就是因为Gemini，及其引人注目的视频提问服务。但是，一场持续两个小时的演讲，让经验丰富的科技记者也摸不着头脑，难以理解，这不是解决问题的方法。谷歌花了很长时间谈论它的AI在总结事物方面有多么优秀，也许是时候让谷歌自己来使用这些工具了。 ... PC版： 手机版：

外媒评Google I/O 2024：传统搜索日薄西山 谷歌全力重塑新模式

外媒评Google I/O 2024：传统搜索日薄西山 谷歌全力重塑新模式 此次大会上，Google宣布了其人工智能战略在各业务领域的全面落地。特别是，备受关注的Gemini聊天机器人获得了显著的功能增强，Google还对其核心搜索引擎进行了革命性的改进，目的是在与不断增强的人工智能竞争对手竞争中不落下风。具体而言，在大会上Google正式发布了多项新产品和服务：最新大语言模型Gemini1.5 Pro、针对快速响应场景的Gemini 1.5 Flash、参数量更大的开源模型Gemma 2、图像生成工具Imagen 3、视频生成模型Veo，以及在搜索引擎中新增的AIOverviews功能和实时人工智能助手。此外，Google还推出了第六代TPU芯片Trillium，为其人工智能应用提供了更强大的算力支持。关于此次GoogleI/O开发者大会的盛况，外国主流媒体纷纷发表评论。《华尔街日报》：Google新AI功能将重塑利润丰厚的互联网搜索业务Google将在年底前向其搜索引擎的数十亿用户展示由人工智能提供支持的答案，通过这种方式扩大该技术的应用范围，以应对其核心业务领域日益激烈的竞争。该策略已在本周在美国率先实施，这标志着Google对生成式人工智能技术的坚定支持。投资者和竞争对手普遍认为，这次更新不仅体现了Google对该技术的信心，也是其尝试重塑在线信息互动方式的一大步。这一举措将受到密切关注，因为它将深刻影响Google数千亿美元的广告销售业务，同时也会影响Google与网上内容提供商之间的关系，它们目前依赖搜索引擎流量。自OpenAI在2022年底推出ChatGPT以来，I/O开发者大会已成为Google展示其人工智能能力的重要平台，促使其加速推出竞争技术。Google的人工智能策略中，与其核心业务密切相关的新搜索功能尤为引人注目。Google一年前宣布了这一项目，此前，OpenAI的主要支持者微软已推出了使用人工智能以对话形式回答问题的必应搜索引擎版本。同时，如估值超过10亿美元的Perplexity等初创公司也推出了能够整合网络信息的类似工具。据悉，OpenAI正开发一款搜索产品，将与这些产品竞争。Google表示，本周将有数亿美国用户开始在搜索中看到AI Overviews，并预计到年底前，随着该功能在其他国家的推出，将有超过10亿用户体验到这一功能。此前，Google已在通过名为“搜索实验室”的项目注册的用户中测试了这些功能。投资者对Google搜索的任何变化都极为敏感，因为这些变化可能影响广告点击量。去年，去年，其母公司Alphabet收入高达3070亿美元，大部分来源于搜索结果旁的广告。为缓解投资者对人工智能解决方案成本增加的担忧，Alphabet CEO桑达尔·皮查伊（Sundar Pichai）上月在财报电话会上表示，自去年以来与人工智能摘要相关的搜索成本已下降了80%。这一转变也引起了新闻媒体和独立网站所有者的关注，他们依赖搜索引擎在读者面前展示自己。作为回应，Google承诺将优先向出版商提供流量。Google表示，与普通搜索结果相比，当链接被纳入AI Overviews时，人们点击它们的次数更多。然而，在推广这项技术时，Google表现出了极大的谨慎。目前，Google不打算在搜索页面上提供与人工智能聊天机器人进行长时间对话的功能，尽管这在用户测试中受到欢迎，并在去年的大会上进行了展示。《纽约时报》：Google迈出AI发展的下一步皮查伊去年5月表示，Google计划利用人工智能来重塑其全部产品线。然而，由于新的生成式AI技术可能传播虚假信息的风险，Google在将此技术应用于其庞大的搜索引擎时，采取了谨慎的态度。Google搜索引擎拥有超过20亿活跃用户，去年为Google创造了高达1750亿美元的收入。在加州山景城举行的Google开发者大会上，皮查伊详细介绍了Google如何逐步将人工智能技术融入其搜索引擎。他宣布，从本周起，美国用户将首次体验到一种名为AI Overviews的新功能，该功能在传统搜索结果之上提供信息摘要。预计到今年年底，全球将有超过10亿用户体验到这项先进技术。然而，AI Overviews的推出可能加剧内容提供商对流量减少的担忧，这些提供商已因与其他科技平台的分歧面临困境，而Google的新产品可能进一步加重这一压力。在Google搜索中，用户将看到某一主题的更详细摘要，这可能减少他们访问其他网站的需求，尽管Google试图淡化这些担忧。此外，Google还公布了其他战略举措，包括轻量级AI模型、新芯片及旨在帮助用户执行任务的智能主体等，以在与微软和OpenAI的人工智能竞赛中占据有利地位。皮查伊强调：“我们正处于人工智能平台转型的初期阶段。我们希望每个人都能从Gemini的能力中受益，无论是开发者、初创企业还是公众。”随着ChatGPT在2022年底横空出世，一些科技界人士认为这是对Google搜索引擎的严峻挑战，后者一直是最受欢迎的在线信息获取方式。自那以后，Google一直在努力重新夺回人工智能领域的领先地位，推出了一系列名为Gemini的技术。Google还将这项技术应用于YouTube、Gmail和Docs，帮助用户更轻松地创建视频、电子邮件和文档草稿。与此同时，Google与OpenAI及其合作伙伴微软的竞争仍在继续。在Google大会的前一天，OpenAI展示了一个更类似于语音助手的新版ChatGPT。在最新的活动中，Google展示了如何更深入地将人工智能融入用户的日常生活中。它推出了“阿斯特拉计划”（ProjectAstra），这是一项旨在探索人工智能作为智能主体与用户进行语音互动，并对图像和视频做出反应的实验。皮查伊预计，绝大多数人将通过Google搜索引擎与Gemini人工智能技术进行互动，“我们希望使人们与Gemini的互动变得更加无缝”。路透社：Alphabet推动增强版AI搜索和聊天机器人以应对竞争Google母公司Alphabet在周二详细介绍了如何在各业务领域深入整合人工智能。此举显著增强了其Gemini聊天机器人的功能，并对其著名的搜索引擎进行了革命性改进，目的是在人工智能领域与竞争对手进行正面较量。微软支持的OpenAI在2022年推出的ChatGPT引发了公众极大关注，这一突破性技术看似威胁到了Google在在线搜索和人工智能领域的长期领导地位。为应对此挑战，Google迅速推出了一系列新产品，展示其不断创新的决心。在Google此次全新进攻中，尤为引人注目的是名为Flash的Gemini 1.5 AI模型系列的新成员，这款模型具有更快的运行速度和更低的成本。此外，Google还展示了名为Project Astra的智能助手原型，该助手能与用户就智能手机摄像头实时捕捉到的内容进行对话。同时，Google推出了基于人工智能生成的标题来分类搜索结果，使搜索过程更加高效和精确。对于人工智能更新是否会对Google的盈利业务造成影响，皮查伊表示：“这是一个充满增长和机遇的时代。”OpenAI先前通过演示ChatGPT以类似人类的方式回答各种书面或视觉提示的能力，展示了其技术的先进性和实用性。OpenAI首席执行官萨姆·奥特曼（Sam Altman）甚至曾说，OpenAI提供的软件“感觉就像是电影中的人工智能”。Google的新举措也时常引发与OpenAI在人工智能领域的激烈竞争的讨论。作为Alphabet旗下的人工智能部门，GoogleDeepMind一直在开发能帮助消费者完成日常任务的技术。这些技术在Project Astra中得到了充分展示，该工具可以利用智能手机摄像头提供关于周围世界的信息概览，为用户的生活带来极大便利。Google在谈到Astra时表示：“我们的目标是建立一个通用的人工智能主体，它能够在日常生活中发挥真正的帮助作用。”市场研究机构eMarketer的分析师雅各布·伯恩（Jacob Bourne）指出：“本周发布的AI Overviews将成为衡量Google能否调整其搜索产品以适应生成式人工智能时代需求的重要指标。为... PC版： 手机版：

Google将AI引入足球：在设计进攻和防守定位球方面已超越人类

Google将AI引入足球：在设计进攻和防守定位球方面已超越人类 作为TacticAI项目负责人之一，Zhe Wang在接受采访时表示：“对我来说，足球最令人兴奋的地方在于，这是一场介于艺术和科学之间的游戏。比赛中有很多随机性，但我们仍然可以利用数据做出更好的决定。”在足球近代史上，一些最具标志性的进球都来自角球。DeepMind研究科学家Petar Veličković称，使用从角球获取的数据来训练TacticAI是有道理的，它往往会导致更有条理的进攻。他说：“足球是超级不可预测的，你永远无法准确预测会发生什么。但你能做的是制定合理的战术模式，角球对此真的很有好处，因为它们是固定的，频繁的，并能带来进球机会。”而TacticAI可以就球员在进攻和防守角球时的最佳位置向教练提供建议，这可能会给他们的球队带来边际收益（marginal gains），而这种边际收益往往会在竞技体育中产生巨大差异。TacticAI是由DeepMind与利物浦足球俱乐部合作开发的。Veličković称，利物浦球队的专家帮助DeepMind判断TacticAI的角球动作是否有效，同时这两家团队还合作进行了一项关于AI在足球中的角色的更广泛的研究，并在最近几年建立了一个预测球员在镜头外移动的系统。TacticAI的发布标志着DeepMind和利物浦球队之间合作的结束，但研究人员认为，一些顶级俱乐部的高管才刚刚开始意识到AI可能会在足球比赛中发挥变革性的作用。他们说，和角球一样，包括任意球、界外球和点球在内的其他定位球，也都具备AI所擅长的结构化数据，可能会成为该行业研究人员的下一个研究领域。与此同时，一些纯粹主义者开始担心，这样的技术干预有朝一日可能会让足球比赛失去一部分乐趣。但研究人员强调，他们试图创造一种工具，让教练的生活变得更轻松，而不是让他们失业。Zhe Wang称：“我们并不是要取代人类教练。相反，我们想帮助他们做出更快、更好的决定；帮助他们发现规律，并通过AI找到可能的改进。归根结底，还是由教练来做决定。它只是一个帮助教练更全面地做出这些决定的工具。” ... PC版： 手机版：

最近一直在思考设计师在 AI 时代的定位和职能问题，昨天看到一篇文章，《模型设计师的崛起》有点意思。

最近一直在思考设计师在 AI 时代的定位和职能问题，昨天看到一篇文章，《模型设计师的崛起》有点意思。 他提出了模型设计师这一职位，指出设计师不应仅仅关注AI模型的界面设计，而应深入了解模型的核心构造。 不过这个内容主要还是跟 LLM 相关，设计师在图像和视频模型的优化和训练上其实可以做更多事情，重要性也比 LLM 要更强，我找时间写一下这部分内容。 模型设计师的职责包括与工程团队紧密合作，应对AI模型构建中固有的诸如幻觉、隐私和偏见等问题。 还给出了一些模型设计师需要做的例子，比如通过体验优化引导和简化用户书写提示词的难度等。 翻译及原文：

英伟达谷歌NYU齐上阵 用LLM完成芯片设计

英伟达谷歌NYU齐上阵 用LLM完成芯片设计 它们分别开发出一款AI工具旨在通过⾃动编写硬件代码和验证代码，加快⼯程师的⼯作速度，并通过总结笔记和状态更新来帮助⼤型设计团队协同⼯作。让AI参与芯片设计，全都是因2023年⼈⼯智能热潮掀起，专用AI芯片的供应一直处于紧张状态。与此同时，摩尔定律（即芯⽚中的晶体管数量⼤约每两年翻⼀番）的预言终结，也促使许多公司开始探索全新的芯⽚架构，以⽣产更多专⽤芯⽚。专家表⽰，美国没有⾜够的⼯程师能够为AI以及⾃动驾驶汽车和⽆⼈机等特定应⽤设计这些先进的芯⽚，而当前这些应⽤的需求都在不断增长。英伟达ChipNeMo，专供AI芯设计英伟达应⽤深度学习研究的副总裁Bryan Catanzaro表示，由于GPU能够同时处理成千上万的任务，因此需要近千⼈来制造，⽽且每个⼈都必须了解设计的各个部分是如何协同⼯作的，同时还要不断改进。对此，英伟达团队开发了一种全新定制化大模型ChipNeMo，能够执行诸如回答有关GPU架构的问题，或⽣成芯⽚设计语⾔代码等任务。研究人员在开源Llama 2模型的基础上，对这款AI系统进行了训练。与此同时，该AI系统也是为了与Synopsys等现有设计⾃动化⼯具配合使⽤。英伟达的内部⼯程师开始使⽤ChipNeMo一年以来，Catanzaro称，他们发现该系统在培训初级⼯程师、总结100个不同团队的笔记，状态更新⽅⾯⾮常有⽤。Google、芯片设计AI公司上阵对于⾕歌DeepMind，他们也开发了⼀套AI系统来改进逻辑合成。这是芯⽚设计的⼀个阶段，包括将电路⾏为描述转化为实际电路。⾕歌表⽰，这些技术可能会被⽤于改进⾃⼰的定制⼈⼯智能芯⽚，即“张量处理单元”（TPU）。另外，芯片设计公司Synopsys去年发布了一款AI工具名为Synopsys.ai Copilot。这是与微软合作通过OpenAI的⼤模型开发的工具，旨在帮助工程师们开展合作。该公司表示，微软的内部硅团队正在使用该工具来支持其工程需求。这款AI⼯具可以回答有关如何使⽤公司设计⼯具的问题，并能创建⼯作流程脚本。它还可以生成RTL（一种芯片设计语言，用于规范芯片架构），只需用简单的英语进行对话即可。学术界研究爆发在学术界，也有诸多研究朝着这个方向开展。包括纽约大学在内多所大学进行的研究，致力于发现确定生成式AI加速芯片设计的其他方法。其中一些研究得到了Synopsys，以及芯片巨头⾼通等公司的资助。QTcore-C1，⼀种由纽约⼤学研究⼈员通过与ChatGPT对话命名和设计的芯⽚纽约⼤学坦登⼯程学院的⼀个团队通过与ChatGPT对话，在⼤约⼀个⽉的时间⾥设计出了⼀款芯⽚。这项技术被称为“Chip Chat”，研究⼈员只需与ChatGPT对话， 就能⾃动编写描述芯⽚功能的芯⽚设计语⾔ Verilog。纽约⼤学坦登⼯程学院电⽓与计算机⼯程研究所副教授Siddharth Garg表示，“通过使用与ChatGPT相关的AI系统，研究人员希望将硬件设计时间加速到⼀个⽉或更短的时间”。通常来说，设计一款最复杂的微芯⽚，可能需要耗费长达半年，甚至更长的时间。但这些AI工具并非，无所不能。德克萨斯大学奥斯汀分校电气与计算机工程学教授David Pan说，目前，这些工具主要用于培训年轻的芯片设计师、编写硬件语言和报告错误等方面。⽬前的⼯具还有其他局限性。⼯程师必须仔细验证AI⽣成的输出结果， ⽽且⽬前还没有⼀种解决⽅案可以⾃动完成从设计到验证、实现设计的晶体管以及检查设计的电⽓特性等整个芯⽚设计流程。Synopsys公司的Krishnamoorthy估计，利⽤⽣成式AI⾃主创建功能芯⽚的能⼒⼤约还需要5年时间。参考资料： ... PC版： 手机版：