OpenAI 惨遭背刺,GPT-3.5 Turbo 参数量被微软意外泄露

OpenAI惨遭背刺,GPT-3.5Turbo参数量被微软意外泄露在微软研究院新论文《CODEFUSION:APre-trainedDiffusionModelforCodeGeneration》中,数个模型被标注了参数量,其中GPT-3.5Turbo只有200亿参数,而不是众人熟知的1750亿。如果该数字无误,将刷新人们对性能与参数量关系的认知,并且像ChatGPT这样的AI也有机会运行在家用PC上。https://arxiv.org/abs/2310.17680投稿:@ZaiHuaBot频道:@TestFlightCN

相关推荐

封面图片

OpenAI 将自定义数据功能引入 GPT-3.5 Turbo

OpenAI将自定义数据功能引入GPT-3.5Turbo从而在构建特定行为的同时更轻松地提高文本生成AI模型的可靠性。OpenAI,GPT-3.5的微调版本在“某些细分任务”上可以匹配甚至超越该公司旗舰模型GPT-4的基本功能。通过微调,通过OpenAI的API使用GPT-3.5Turbo的公司可以使模型更好地遵循指令,例如让它始终以给定的语言进行响应。此外,微调使OpenAI客户能够缩短文本提示,以加快API调用并降低成本。微调成本如下:训练:0.008美元/1KToken使用输入:0.012美元/1KToken使用输出:0.016美元/1KTokenOpenAI表示,对GPT-4的微调支持(与GPT-3.5不同,除了文本之外还可以理解图像)将于今年秋季晚些时候推出。——

封面图片

OpenAI发布新嵌入模型,降低GPT-3.5 Turbo价格 | blog

OpenAI发布新嵌入模型,降低GPT-3.5Turbo价格OpenAI发布了新的嵌入模型和API更新,包括两个新的嵌入模型、更新的GPT-4Turbo预览模型、更新的GPT-3.5Turbo模型和更新的文本审核模型。新的嵌入模型包括一个小型高效的text-embedding-3-small模型和一个大型高性能的text-embedding-3-large模型,允许开发者在使用嵌入时权衡性能和成本,特别是可以通过减少嵌入的维数(即从序列的末尾移除一些数字)来实现。这些模型能够创建最多3072维的嵌入。OpenAI表示,发送到OpenAIAPI的数据默认不会被用来训练或改进OpenAI模型。

封面图片

OpenAI 连更 5 款模型:修复 GPT-4“变懒”BUG,GPT-3.5 Turbo 模型输出降价 50%

OpenAI连更5款模型:修复GPT-4“变懒”BUG,GPT-3.5Turbo模型输出降价50%OpenAI今天一口气宣布了5个新模型,包括两个文本嵌入模型、升级的GPT-4Turbo预览版和GPT-3.5Turbo、一个审核模型。更新GPT-4Turbo预览模型:重点修复了模型的“变懒”情况,能更彻底地完成代码生成等任务。新预览版还改善了对非英语生成问题的支持,引入“gpt-4-turbo-preview”模型别名,可自动指向最新的预览版。定价更低的新嵌入模型:OpenAI还引入了两种新的嵌入模式,一种是体积更小、效率更高的text-embedding-3-small模型,另一种是体积更大、功能更强的text-embedding-3-large模型。原生支持shortening:允许开发人员以降低存储和计算需求来换取一定的准确性。简单地说,保持主旨不变的情况下,shortening就像从一个复杂的标签中去掉一些不那么重要的细节。GPT-3.5Turbo:新的输入价格定格在每1ktoken价格为0.0005美元,而输出价格则为每1ktoken价格为0.0015美元。投稿:@TNSubmbot频道:@TestFlightCN

封面图片

OpenAI 发布替代 GPT-3.5 的 GPT-4o mini

OpenAI发布替代GPT-3.5的GPT-4ominiOpenAI发布了GPT-4o模型的小型版本GPT-4omini,它将取代GPT-3.5Turbo提供给所有ChatGPT用户,包括免费和付费用户。GPT-4omini类似GPT-4o,支持多模,能解释图像、文本和音频,能生成图像。GPT-4omini支持128K上下文令牌,其数据截至2023年10月,它的API费用比GPT-3.5Turbo低60%,每百万输入令牌15美分,每百万输出令牌60美分。GPT-4omini将使用名为instructionhierarchy的新技术,限制了越狱。来源,频道:@kejiqu群组:@kejiquchat

封面图片

微软 Copilot 全面升级 OpenAI GPT-4 Turbo 模型,免费用户也可使用

微软Copilot全面升级OpenAIGPT-4Turbo模型,免费用户也可使用在经过一系列工作之后,微软现已针对Copilot用户群全面升级为OpenAI最先进的GPT-4Turbo模型。Copilot Pro用户如果不习惯的话还可以切换回标准GPT-4模型,但免费用户是无法选择模型的。线索:@ZaiHuabot投稿:@TNSubmbot频道:@TestFlightCN

封面图片

OpenAI正在升级其文本生成模型GPT-3.5-turbo和GPT-4并降低价格

OpenAI正在升级其文本生成模型GPT-3.5-turbo和GPT-4并降低价格例如,函数调用可以帮助创建聊天机器人,通过调用外部工具回答问题,将自然语言转换为数据库查询,并从文本中提取结构化数据。“这些模型已经过微调,可以检测何时需要调用函数……并使用符合函数签名的JSON进行响应,”OpenAI在介绍中写道。“函数调用允许开发人员更可靠地从模型中获取结构化数据。”除了函数调用之外,OpenAI还引入了一种具有极大扩展上下文窗口的GPT-3.5-turbo。上下文窗口以标记或原始文本位衡量,指的是模型在生成任何其他文本之前考虑的文本。具有小上下文窗口的模型往往会“忘记”即使是最近的对话内容,导致他们偏离主题。新的GPT-3.5-turbo提供四倍于普通GPT-3.5-turbo的上下文长度(16000个令牌),价格是原来的两倍——每1000个输入令牌(即输入模型的令牌)0.003美元,每1000个输出令牌0.004美元(模型生成的标记)。OpenAI表示,它一次可以摄取大约20页的文本——明显低于AI初创公司Anthropic的旗舰模型可以处理的数百页文本。(OpenAI正在测试具有32000个令牌上下文窗口的GPT-4版本,但发布范围有限。)从好的方面来说,OpenAI表示它正在将GPT-3.5-turbo(原始版本,而不是具有扩展上下文窗口的版本)的价格降低25%。开发人员现在可以以每1000个输入令牌0.0015美元和每1000个输出令牌0.002美元的价格使用该模型,这相当于每美元大约700页。text-embedding-ada-002的定价也有所降低,这是OpenAI更流行的文本嵌入模型之一。文本嵌入衡量文本字符串的相关性,通常用于搜索(结果按与查询字符串的相关性排序)和推荐(推荐具有相关文本字符串的项目)。Text-embedding-ada-002现在每1000个令牌的价格为0.0001美元,比之前的价格降低了75%。OpenAI表示,减少是通过提高其系统效率实现的——毫无疑问,这是这家初创公司关注的一个关键领域,因为它在研发和基础设施上花费了数亿美元。OpenAI已经表示,在3月初发布GPT-4之后,对现有模型的增量更新是当下主要工作,而不是研发大规模的从头开始的新模型。在最近的一次会议上,首席执行官山姆·奥特曼重申OpenAI尚未开始培训GPT-4的继任者,这表明该公司在开始该模型之前“还有很多工作要做”。了解更多:https://openai.com/blog/function-calling-and-other-api-updates...PC版:https://www.cnbeta.com.tw/articles/soft/1365217.htm手机版:https://m.cnbeta.com.tw/view/1365217.htm

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人