西风 发自 凹非寺量子位 | 公众号 QbitAItelegram 裸舞
OpenAI新模子,怕是确实要来了。
高明模子“草莓”被曝本年秋天可能就与大众碰面!
顺带着GPT-4继任者也浮出水面。
The Information称,OpenAI如故悄摸展示过“草莓”,它还被用来改造代号“猎户座(Orion)” 的新模子。
“猎户座”定位是新旗舰,也即是GPT-4的下一代。
有真谛的是,OpenAI当今正在故意招东说念主访问自家职工,职位叫:工夫里面风险访问员。
来望望这五条使命:
整合各式数据源检测、分析并缓解潜在的里面胁迫构建、保持并改造用于识别里面胁迫的重要办法和骨子期骗场景访问可疑步履,并与法律及东说念主力资源部门融合与跨学科团队相助,填补监控盲点并提高安全范例详情并监管数据丢失防患规定的施行
好像句句皆在明白加强对内规定,持内鬼。
回顾一下GPT-4o发布前,也有一波查内鬼的看成,那时口头是放各式假音信。
先是重振旗饱读给SearchGPT搜索引擎造势,路透社啊、彭博社啊这些泰斗媒体刚把音信放出去,OpenAI来了个出其不料。
秘书改成对ChatGPT和GPT-4的升级,也即是自后发布了GPT-4o。
对应OpenAI这波新的内紧,有新看成简略率是没跑了。
先具体来望望此次对于高明新模子“草莓”和“猎户座”的新细节telegram 裸舞。
“草莓”用于生成合成数据
“草莓”模子第一次“表示”是在一个月前。此次The Information曝出音信:
OpenAI标的是尽快秋天推出“草莓”,可能一样所以聊天机器东说念主神态,集成在ChatGPT系中。
“草莓”能处置它之前未遭受过的数学推理问题,还故意针对编程问题受过窥伺,且才气不仅限于恢复工夫性问题。
给它更多时分“念念考”,它还能恢复更主不雅话题的问题,举例居品营销战略,像《纽约时报》游戏版本的Connections复漫笔字谜题也难不倒它。
如刚刚提到的,“草莓”还将用于改造另一个新模子“猎户座”。
知情东说念主暗意,OpenAI用更大版本的“草莓”生成用于窥伺“猎户座”的数据,即“合成数据”。
也即是说“草莓”可能还不啻一个版本。
聊天机器东说念主版本是原始草莓模子的“蒸馏”简化的“小草莓”,它接力保持与更大型号疏通的性能,同期操作更容易且本钱更低。
除此外,“草莓”还不错为OpenAI行将推出的Agent提供匡助。
GitHub Copilot前首席架构师、初创公司Minion AI CEO Alex Graveley暗意,使用“草莓”生成更高质地的窥伺数据不错匡助OpenAI减少其模子产生“幻觉”。
The Information还称,奥特曼曾在五月份的一次举止中暗意“对于下一个模子来说,咱们如故有敷裕数据了。咱们进行了各式实验,包括生成合成数据”,这有可能即是在说猎户座。
OpenAI这边暂未对The Information的爆料发表挑剔。
网友商榷利弊,纷纷暗意“猎户座”应该即是GPT-5。
有网友还翻出,驰名OpenAI爆料账号Jimmy Apples昨年曾发过一张“猎户座”像片,又“预言”了?
网友摩斯持续分析,OpenAI昨年内斗,奥特曼11月17被奉命,11月22复职,Jimmy Apples发上头这个猎户座的帖子卡在11月25日。
难不行,Ilya看到的是这?
还有网友以为草莓/Q*更像是一种工夫,而不是一个模子:
它可能生成100个假定或谜底,然后对它们进行排行,选出最优解。天然这一历程迥殊花费打算资源,但它有可能显赫减少虚伪信息并将推理才气培植5倍。
对于“草莓”的更多工夫细节,之前爆料的说法是这么婶儿的:
“草莓”如故在迥殊大的数据集上完成预窥伺,并使用了一种故意的处理技艺。
暴力强奸包括后窥伺(post-training);或者在如故进行大鸿沟窥伺后,再诊疗基础模子来“雕镂”性能。后窥伺部分包括常见的微调、东说念主类反映强化学习(RLHF)等。
况兼“草莓”与斯坦福大学在2022年(那时ChatGPT还未发布)建议的一种名为自学推理(Self-Taught Reasoner,简称STaR)的技艺很相似。
One More Thing
OpenAI团队这边还有更多新音信传出。
前OpenAI职工Daniel Kokotajlo爆料,曾专注于超强AI恒久风险的安全团队职工近半数已下野。
参考集合:[1]https://www.theinformation.com/articles/openai-shows-strawberry-ai-to-the-feds-and-uses-it-to-develop-orion[2]https://www.reddit.com/r/singularity/comments/1f2iism/openai_shows_strawberry_ai_to_the_feds_and_uses/[3]https://www.reddit.com/r/singularity/comments/1f25bha/exodus_at_openai_nearly_half_of_agi_safety/[4]https://x.com/apples_jimmy/status/1728239862346903924[5]https://www.businessinsider.com/openai-is-hiring-someone-to-investigate-its-own-employees-2024-8[6]https://openai.com/careers/technical-insider-risk-investigator/