OpenAI DevDay公布五项重大创新,AI实时语音的时代来了!成本比GPT-3降低近1000倍!
文章概要:
1. OpenAI在DevDay上公布了五项重大创新:实时API、提示词缓存、模型蒸馏、视觉微调、新广场玩法。
2. 这些新能力预示了OpenAI的战略重心的变化——加大投入基础建设、增强其「开发者生态」。
3. OpenAI最近一段时间可谓多事之秋:核心高管离职、产品兑现不及大众预期。
4. OpenAI 首席产品官凯文·韦尔 (Kevin Weil) 在活动前的记者会上表示:首席技术官米拉·穆拉蒂 (Mira Murati) 和首席研究官鲍勃·麦格鲁 (Bob McGrew) 的离职不会影响公司的发展。
5. OpenAI 指出,过去两年来,它已将开发人员访问其API的成本降低了9%。
6. OpenAI 发布的 Realtime API,目前处于公开测试阶段。
7. 这项新产品使开发人员能够创建低延迟、多模式体验,尤其是在语音转语音应用程序中。
8. 「提示词缓存」功能,旨在降低开发人员的成本和延迟。
9. 该系统自动对模型最近处理的输入标记应用 50% 的折扣,这可能会为经常重复使用上下文的应用程序带来大量节省。
10. 引入了「模型蒸馏」,这种集成的工作流程,允许开发人员使用o1-preview和GPT-4o等高级模型的输出来提高GPT-4o mini等更高效模型的性能。
11. 为 OpenAI 最新的大型语言模型GPT-4o引入视觉微调。
12. 此功能允许开发人员使用图像和文本自定义模型的视觉理解能力。
13. 对提示词的结构框架以及其他用法作出了更多说明。
阅读原文
2. 这些新能力预示了OpenAI的战略重心的变化——加大投入基础建设、增强其「开发者生态」。
3. OpenAI最近一段时间可谓多事之秋:核心高管离职、产品兑现不及大众预期。
4. OpenAI 首席产品官凯文·韦尔 (Kevin Weil) 在活动前的记者会上表示:首席技术官米拉·穆拉蒂 (Mira Murati) 和首席研究官鲍勃·麦格鲁 (Bob McGrew) 的离职不会影响公司的发展。
5. OpenAI 指出,过去两年来,它已将开发人员访问其API的成本降低了9%。
6. OpenAI 发布的 Realtime API,目前处于公开测试阶段。
7. 这项新产品使开发人员能够创建低延迟、多模式体验,尤其是在语音转语音应用程序中。
8. 「提示词缓存」功能,旨在降低开发人员的成本和延迟。
9. 该系统自动对模型最近处理的输入标记应用 50% 的折扣,这可能会为经常重复使用上下文的应用程序带来大量节省。
10. 引入了「模型蒸馏」,这种集成的工作流程,允许开发人员使用o1-preview和GPT-4o等高级模型的输出来提高GPT-4o mini等更高效模型的性能。
11. 为 OpenAI 最新的大型语言模型GPT-4o引入视觉微调。
12. 此功能允许开发人员使用图像和文本自定义模型的视觉理解能力。
13. 对提示词的结构框架以及其他用法作出了更多说明。
OpenAI o1正在重塑Agent?
文章概要:
1. 文章讨论了OpenAI的o1模型的One-Shot能力及其在Agent架构中的应用。
2. One-Shot能力指的是o1模型能够将复杂的描述准确地编排为可执行的指令序列
3. 文章比较了主流模型与o1的-Sh能力,并探讨了-Shot在决策体系中的应用前景。
阅读原文
2. One-Shot能力指的是o1模型能够将复杂的描述准确地编排为可执行的指令序列
3. 文章比较了主流模型与o1的-Sh能力,并探讨了-Shot在决策体系中的应用前景。
OpenAI推出Windows系统ChatGPT应用,直通最强o1
文章概要:
1. OpenAI推出了适用Windows系统的ChatGPT应用,目前仅供ChatGPT Plus、Team、Enterprise和Edu用户使用。
Windows版ChatGPT针对Plus、企业、团队和教育用户开放今年晚些时候将为所有用户提供完整体验版。
3. Windows版ChatGPT可以让工作和Chat集成,用户能使用包含GPTo、OpenAI o1的所有模型,使用模型创建图表、输出文本,以及通过内置的DALL-E 3生成图像,但不支持高级语音模型和GPT Store。
. Windows版ChatGPT和网页版类似,左边是的GPTs和聊天记录,右边是对话框,的对话框在屏幕下方网页版在画面中间br>5. OpenAI还更新此前发布的,可以直接通过「Show Change」自己更改代码,和原始代码的更改之处。
阅读原文
Windows版ChatGPT针对Plus、企业、团队和教育用户开放今年晚些时候将为所有用户提供完整体验版。
3. Windows版ChatGPT可以让工作和Chat集成,用户能使用包含GPTo、OpenAI o1的所有模型,使用模型创建图表、输出文本,以及通过内置的DALL-E 3生成图像,但不支持高级语音模型和GPT Store。
. Windows版ChatGPT和网页版类似,左边是的GPTs和聊天记录,右边是对话框,的对话框在屏幕下方网页版在画面中间br>5. OpenAI还更新此前发布的,可以直接通过「Show Change」自己更改代码,和原始代码的更改之处。
OpenAI DevDay AI 音频更新亮眼,有望催化 AI 语音交互应用成熟
文章概要:
1. 2024年101日,OpenAI开发者大会上,公司公布了几大创新:实时API、提示词缓存、模型蒸馏、微调
2. OpenAI推出了Re的公开测试,让所有付费开发者都能在其应用中打造低延迟多体验
3. Realtime API收费模式和价格:输入令牌的价格为5/1M tokens,令牌的为20美元/M tokens。音频输入的价格为100美元/ tokens,输出的价格20美元/1M tokens
4AI+音频代表性应用公司及应用场景:Duolingo(语言其他课程学习)
5. 2024年9月24日,全球领先的移动学习Duolingo其年度会议ocon 2024上宣布了重大产品创新,主要包括:独特虚拟IP视频通话、虚拟世界学玩、扩展音乐、数学课程更新
6. 目前Du历史新高受益于式AI,公司产品的用户付费率提升,公司财务和数据均表现较为亮眼
阅读原文
2. OpenAI推出了Re的公开测试,让所有付费开发者都能在其应用中打造低延迟多体验
3. Realtime API收费模式和价格:输入令牌的价格为5/1M tokens,令牌的为20美元/M tokens。音频输入的价格为100美元/ tokens,输出的价格20美元/1M tokens
4AI+音频代表性应用公司及应用场景:Duolingo(语言其他课程学习)
5. 2024年9月24日,全球领先的移动学习Duolingo其年度会议ocon 2024上宣布了重大产品创新,主要包括:独特虚拟IP视频通话、虚拟世界学玩、扩展音乐、数学课程更新
6. 目前Du历史新高受益于式AI,公司产品的用户付费率提升,公司财务和数据均表现较为亮眼
没上过大学的“天才少年”大战OpenAI!偷架构?偷论文?到底谁在剽窃AI 开源项目
文章概要:
1. OpenAI发布开源产品Swarm框架,用于构建、编排和部署多代理系统
2. Kye Gomez指责OpenAI窃取了他们的名字、代码和方法
3. Gomez表示,OpenAI的行为是对他们最大客户之一的完全背信弃义,给人带来了巨大的失望
4. Gomez计划寻求法律赔偿,以弥补对他们名称造成的损害,除非OpenAI投资他们
5. Gomez言辞激烈,但舆论似乎并没有站在他那一边
6. 有网友指出,Gomez在GitHub上获得了超过16,000个星星,他的实现路径是:新研究论文发布或传播 > 创建包含AI代码的repo > 将其发布到社交媒体上,用户为repo加注星标以将其加入书签
7. Gomez小作文里提到的Tree of Thoughts事件,也是因为他抢注了别人的名字
8. 有网友爆料出,Gomez之前还曾抢注名为“sora”的存储库,去年他运行机器人来抓取微软B图像创建器,以重新提供针对他自己的“非官方”dalle3 API请求
9. 截至发文,AI并未对此事件做出回应
阅读原文
2. Kye Gomez指责OpenAI窃取了他们的名字、代码和方法
3. Gomez表示,OpenAI的行为是对他们最大客户之一的完全背信弃义,给人带来了巨大的失望
4. Gomez计划寻求法律赔偿,以弥补对他们名称造成的损害,除非OpenAI投资他们
5. Gomez言辞激烈,但舆论似乎并没有站在他那一边
6. 有网友指出,Gomez在GitHub上获得了超过16,000个星星,他的实现路径是:新研究论文发布或传播 > 创建包含AI代码的repo > 将其发布到社交媒体上,用户为repo加注星标以将其加入书签
7. Gomez小作文里提到的Tree of Thoughts事件,也是因为他抢注了别人的名字
8. 有网友爆料出,Gomez之前还曾抢注名为“sora”的存储库,去年他运行机器人来抓取微软B图像创建器,以重新提供针对他自己的“非官方”dalle3 API请求
9. 截至发文,AI并未对此事件做出回应
破纪录!OpenAI成为史上第一家估值万亿元的AI公司!独家融资协议:“别投对手公司”
文章概要:
1. OpenAI官宣,成功获融资66亿美元(约合人民币43亿元),投后公司估值达到了惊人的1570亿美元(约人民币1.1),成为史上第一家估值超过万亿元的AI公司
2. 本轮融资还是由Thrive Capital公司领,公司投资13亿美元,此外微软、软银、英伟达等公司也参与了本次融资
3. 据路透社报道,Thrive Capital还承诺,如果OpenAI能实现收入目标,明年还会按1570亿美元的估值再投资10亿美元
. 根据交易文件显示,作为本轮融资的一部分,OpenAI有两年时间转变为营利性企业,其融资转换为债务
5. OpenAI向投资者们开出独家融资协议”:OpenAI希望投资者们,不要去投与OpenAI竞争的AI初创公司
6. 想要了解更多AI行业资讯以及ChatGPT和AI绘画实战案例,欢迎加入我们的「互联网AI早读课」星球
阅读原文
2. 本轮融资还是由Thrive Capital公司领,公司投资13亿美元,此外微软、软银、英伟达等公司也参与了本次融资
3. 据路透社报道,Thrive Capital还承诺,如果OpenAI能实现收入目标,明年还会按1570亿美元的估值再投资10亿美元
. 根据交易文件显示,作为本轮融资的一部分,OpenAI有两年时间转变为营利性企业,其融资转换为债务
5. OpenAI向投资者们开出独家融资协议”:OpenAI希望投资者们,不要去投与OpenAI竞争的AI初创公司
6. 想要了解更多AI行业资讯以及ChatGPT和AI绘画实战案例,欢迎加入我们的「互联网AI早读课」星球
适用于 .NET 稳定的官方OpenAI库
文章概要:
1. 文章介绍了OpenAI官方提供的用于.NET开发者访问OpenAI的REST API的库,该库通过NuGet包发布,具有命名空间组织、异步支持、环境变量和配置文件管理、流式传输、工具调用、结构化输出和支持最新模型等特性。
2 文章还介绍了如何安装NuGet包并在.NET应用程序中使用OpenAI库,包括创建客户端、完成聊天等。
3. 文章提供了项目源码地址和优秀项目和框架精选的相关信息。
阅读原文
2 文章还介绍了如何安装NuGet包并在.NET应用程序中使用OpenAI库,包括创建客户端、完成聊天等。
3. 文章提供了项目源码地址和优秀项目和框架精选的相关信息。
OpenAI若造出AGI,就能从微软独立:股权争夺战开打,两边都找好了投行
文章概要:
1. OpenAI和微软的关系出现紧张,原因包括OpenAI的财务压力、管理层震荡以及微软与OpenAI员工之间的分歧。
2. OpenAI试图重新谈判与微软的交易,以获得更多的计算能力并减少开支,但微软高管则越来越担心他们的人工智能工作过于依赖OpenAI。
3. 微软开始对冲对OpenAI的赌注,包括挖走OpenAI的竞争对手Inflection的员工,以及与Oracle签订计算合同。
4. OpenAI在寻找算力资源获取的替代方案的同时,还加快了扩大投资者范围的步伐。
5. OpenAI与微软合作关系的最新调整可能会改变其计算成本的趋势,但微软高管对这些变化感到满意。
6. OpenAI的员工抱怨微软没有提供足够的能力,OpenAI高管认为这是获得更好合同的途径。
7. 争执已经上升到了台面上,微软正与OpenAI就股权展开博弈,双方都在向投资银行寻求谈判的建议。
阅读原文
2. OpenAI试图重新谈判与微软的交易,以获得更多的计算能力并减少开支,但微软高管则越来越担心他们的人工智能工作过于依赖OpenAI。
3. 微软开始对冲对OpenAI的赌注,包括挖走OpenAI的竞争对手Inflection的员工,以及与Oracle签订计算合同。
4. OpenAI在寻找算力资源获取的替代方案的同时,还加快了扩大投资者范围的步伐。
5. OpenAI与微软合作关系的最新调整可能会改变其计算成本的趋势,但微软高管对这些变化感到满意。
6. OpenAI的员工抱怨微软没有提供足够的能力,OpenAI高管认为这是获得更好合同的途径。
7. 争执已经上升到了台面上,微软正与OpenAI就股权展开博弈,双方都在向投资银行寻求谈判的建议。