我尝试了一下自然语言编程工具Dify，前几天在我的周刊里推荐过。

我尝试了一下自然语言编程工具Dify，前几天在我的周刊里推荐过。 花了20分钟用这个应用写了一个东西，非常惊艳，完全没有写代码。如果没有Dify的话，我可能需要很长时间才能搞定它。 这个应用可以根据简短主题生成Midjourney提示词，效果很好。接下来我会分享一些创建过程，让大家更加了解这个平台。 你可以在这里访问Dify： 教程的详细内容也可以在这里查看： 正式开始我们的教程。 Dify可以选择两种应用一种是对话型应用类似于chatgpt那种，另一种是文本生成类应用没有多轮对话的机制点击按钮直接生成文本内容。我们要创建的Midjoureny提示词机器人,所以我们选择文本生成应用就行。 我们输入名称创建完成之后看到的页面就是我们的看板页面里面有一些数据监控和应用设置。我们先点击左侧的提示词编排，这里就是主要的工作页面了。 这个页面左侧是提示词设置和一些其他功能，右侧可以实时预览和使用你创建的内容。前缀提示词就是用户每次输入内容后触发的提示词了，可以理解为每次GPT都会按照你的前缀提示词内容去处理用户输入的信息。 可以看一下我的前缀提示词结构，主要有两部分前面是中文写的让GPT按照下面英文的结构输出照片的描述。英文的结构就是生成提示词的模板了，主要意思是【主题彩色照片，错综复杂的图案，鲜明的对比，环境描述，相机型号，与输入内容相关的镜头焦距描述，与输入内容相关的构图描述，四位摄影师的名字】 这个就是提示词的主要内容了。理论上你现在保存到右边预览区域输入你想生成的主题就能生成对应提示词了。 那可能有人注意到了后面的{{proportion}}和 {{version}}是什么呢，可以看到我右边需要用户选择图像比例和模型版本这两个变量就是用来传递用户选择的信息的。我们看一下如何设置。 我们的功能是把用户选择的信息填到提示词的最后方便用户直接复制不用重新填写和记忆这些命令，这里就要用到下面的变量功能。 变量的作用就是把用户表单填写或者选择的内容动态的带入到提示词里面。比如我这里创建了两个变量一个代表图像比例一个代表模型版本。点击添加按钮创建变量。

在链接前面加上“talk2”，可直接针对论文内容进行问答（需要自备OpenAI key）|

在链接前面加上“talk2”，可直接针对论文内容进行问答（需要自备OpenAI key）| Talk2Arxiv 是专为学术论文 PDF 构建的开源 RAG（检索增强生成）系统，由talk2arxiv 服务器提供支持 特征 PDF 解析：利用 GROBID 从 PDF 中高效提取文本。 分块算法：用于最佳文本分块的定制算法。按逻辑部分（简介、摘要、作者等）进行分块，并且还利用递归细分分块（块为 512 个字符，然后是 256 个字符，然后是 128 个字符......） 文本嵌入：使用 Cohere 的 EmbedV3 模型进行准确的文本嵌入。 矢量数据库集成：使用 Pinecone 来存储和查询嵌入。这也可以缓存研究论文，因此论文只需要嵌入一次。 上下文相关性：采用重新排名过程来根据用户输入选择最相关的内容。

训练文本到视频的生成系统需要大量配有相应文本提示的。应用了在DALL·E 3中引入的重新字幕技术到上。

训练文本到视频的生成系统需要大量配有相应文本提示的视频。应用了在DALL·E 3中引入的重新字幕技术到视频上。 与DALL·E 3相似，也利用了GPT技术，将用户的简短提示转换成更详细的提示，然后发送给视频模型。 技术报告详细内容：

Windows 11 24H2画图AI需要微软帐户和NPU才可正常运行

Windows 11 24H2画图AI需要微软帐户和NPU才可正常运行 画图并不是唯一获得人工智能升级的功能。微软的人工智能浪潮已经席卷了所有原生应用。照片"应用拥有"润饰"功能，而"画图"应用则拥有"画图创作"功能。使用它，你可以在应用程序中借助 DALLE-3 生成 AI 图像。Windows 11 的"画图创作器"使用微软的云计算根据你的提示生成 AI 图像，而"画图 AI Cocreator"则借助 NPU 在本地将你的绘画/轮廓变成 AI 大作。Paint AI Cocreator 需要一个具有 40 TOPs（每秒万亿次运算）的 NPU 才能在本地处理图像。40 TOPs NPU 是新Copilot+ PC（如配备 Snapdragon X Plus 的 Surface Pro 第 11 版）所采用的Snapdragon处理器的独有配置。但这还不是全部。Paint AI 还需要微软账户才能使用。你可能会问，既然图像生成是在本地设备上进行的，为什么还需要账户呢？原因是图像是人工智能生成的，而微软会对其实施一些安全检查。从上面的截图中可以看到，Paint 要求你登录微软账户，并警告说出于"安全和保安"目的，与 AI Cocreator 的互动将受到监控。它会记住用户发出的提示、设备属性和用户名，以防止生成有害、攻击性或不恰当的内容。画图"会阻止你的人工智能图像生成尝试，但微软承诺它不会存储你的输入或输出图像。微软还将在使用 Paint AI 生成的图像中添加 C2PA 清单，让人们更容易分辨出图像是人工智能生成的。经过一些逆向工程，微软研究人员Albacore在一台配备 NPU 的旧设备上开启了该功能，该设备的 NPU 不符合 40 TOPs 的要求，但目前无法使用。在旧电脑上尝试使用该功能时会发生什么情况？只要输入提示并勾画图像轮廓，就会出现内部错误而失败。我们已经讨论过 Paint AI在调整图像风格和创意方面的灵活性。根据我们在微软 Build 2024 大会上看到的演示，Paint AI 生成图像的速度比旧版图像创建器功能更快。由于它使用本地存在的小语言模型（SLM）来创建图像，因此结果更快。它无需向云端发送请求，只需等待服务器生成图像，然后发送回来即可。此外，在使用 Paint AI 时，您不必担心付费与剩余额度的问题。微软为使用图像创作功能增加了一个计费系统，但配备 NPU 的 Copilot+ PC 并非如此，它为用户提供了更多使用该功能的空间。Paint 基于云的"Creator"功能以前叫"Cocreator"，但当微软意识到可以将该品牌用于 NPU PC 时，公司悄悄地将该功能更名为"Creator"，并开始在提及基于 NPU 的功能时使用"Cocreator"。 ... PC版： 手机版：

Adobe推出Express测试版 借助AI在移动设备上更便利地创建社交内容

Adobe推出Express测试版 借助AI在移动设备上更便利地创建社交内容 该应用的最新版本将使 Adobe 能够更好地与 Canva 竞争，后者去年推出了一套人工智能工具。Adobe Express 用户将可以使用新的"文本到图像"生成器，通过使用 Firefly 生成式人工智能快速生成图像，为项目快速创建新的外观。新的"生成填充"功能可让用户使用文本提示轻松插入、移除或替换人物或物体。此外，新的"文本效果"功能可以帮助用户通过使用不同的文本样式，快速使信息变得生动。Adobe 指出，小企业可以使用这些功能来删除不需要的对象和照片，以增强其宣传内容，而创意专业人士则可以使用它们来加速其社交营销团队的移动内容创建。Creative Cloud 会员可以使用该应用直接在 Adobe Express 中访问和处理 Photoshop 和 Illustrator 中的创意资产。他们还可以添加链接文件，当他们在 Creative Cloud 应用程序中编辑时，这些文件会在 Adobe Express 中同步。Adobe Express 应用程序可让用户预览内容并将其发布到 TikTok 和 Instagram 等社交媒体平台。还可以上传和共享品牌资产，使用特定品牌的颜色和徽标来加快设计过程。该应用可访问数千个视频和多页面模板，以及 Adobe Stock 视频、音乐和图片。Android用户可以从 Google Play 商店下载新的 Adobe Express 应用程序测试版。由于苹果公司限制应用程序的测试版用户数量，因此 iOS 用户需要注册才能访问测试版应用程序。在 Adobe 和 TikTok 宣布 TikTok 的人工智能创意助手现在可以直接在 Adobe Express 中使用之后几周，今天的消息也随之发布。两家公司表示，这一整合将帮助企业和创作者更有效地制作和营销内容。下载与测试者报名地址：... PC版： 手机版：

OpenAI 的语音克隆人工智能模型只需要15秒的样本即可工作

OpenAI 的语音克隆人工智能模型只需要15秒的样本即可工作 人工智能公司 OpenAI 正在提供对其开发的文本转语音生成平台 Voice Engine 的有限访问权限，该平台可以根据某人15秒的声音片段创建合成声音。人工智能生成的语音可以根据命令以与说话者相同的语言或其他多种语言读出文本提示。OpenAI 在其博客文章中表示：“这些小规模部署有助于我们了解方法、保障措施，并思考如何在各个行业中很好地利用 Voice Engine。”拥有访问权限的公司包括教育科技公司 Age of Learning、视觉叙事平台 HeyGen、一线健康软件制造商 Dimagi、人工智能通信应用创建者 Livox 和健康系统 Lifespan。 、