CUDA内核之神、全球最强GPU程序员?OpenAI的这位幕后大神是谁
评论区纷纷猜测,这位大神便是 OpenAI 的资深工程师 Scott Gray。在 OpenAI 的官方介绍中也明确提到,他的工作重心是「优化深度网络在 GPU 上的性能」。为什么一个能编写 CUDA Kernel 的工程师会引起如此关注?因为编写高性能的模型训练 CUDA Kernel 是一项极度专业的技能,它要求开发者必须同时精通三大高深领域
OpenAI神秘狠人,花名Bob - 知乎
Jay 发自 凹非寺 量子位 | 公众号 QbitAI在OpenAI,有一个神秘人专门负责推理用的CUDA内核。 同事们管他叫Bob,人们会把他写的注意力内核亲切地称为 Bob内核。这个内核每天可能在数十万张GPU上被执行 万亿次。要知…
OpenAI命悬一线!神秘人曝光,他若休息一天,公司恐将倒闭,扎克伯格...
扎克伯格之前就没少从OpenAI挖人,像赵晟佳、LucasBeyer这些大牛,后来都去了Meta。这次他盯上ScottGray,意图就更明显了,这已经不是简单的招兵买马了,这是想直接挖断OpenAI的技术龙脉。你想想,对于任何一家AI公司,CUDA内核这种底层技术,就是命门。它掌握在谁手里,谁就掌握了定义模型效率和成本的话语权。要是Sc...
OpenAI神秘高手Bob曝光!每天操控上万张显卡,Meta紧急打探身份...
在OpenAI,有一个被称作“Bob”的神秘狠人,专门负责CUDA内核的开发优化。这个名字听着随意,但他写的“Bob内核”,却是整个AI推理流程中最关键的部分之一。 这套内核每天可能在成千上万张GPU上运行数以万亿次,对精度的要求极高。一旦出错,不但模型要回滚重新训练,还会浪费海量算力资源,影响整个生产效率。而这么高难度...
ChatGPT背后真正的“神”竟是他?OpenAI神秘人物曝光引巨头争夺
而OpenAI,就靠一个人扛着。全世界能写这种高性能CUDA内核的人,不到一百个。能写还不出错,活下来的,一只手都数得过来。Bob就是那个活下来的。我认识一个做AI的工程师,他说自己也试过写类似的内核,写到第三天就崩溃了。不是代码不行,是逻辑太密,细节太多,一个变量搞错,整个流程就乱了。他说:“那种...
AI底层英雄ScottGray:撑起ChatGPT的技术传奇与人才争夺战
尤其是像CUDA内核这样关键的技术,通俗点说,这就像汽车发动机的操作系统,没有它,车再高级也跑不动。而Bob,就是那个用代码写出这套“引擎”的人。业内人士直接形容:全球能胜任这类工作的人,不超过100个。这么核心的岗位,OpenAI压根儿没有团队,全指着Bob一个人饭碗级别撑住!现在,这位门槛“地狱级”的技术...
你敢信吗?全球四大芯片巨头竟全被...@陈陈有享的动态
这位台南出生的"GPU之王",用30年时间将英伟达从3D游戏公司变成AI时代的"卖铲人"。2025年,搭载H200芯片的DGX GH200系统算力突破1EFLOPS,相当于50万台超级计算机的总和,而黄仁勋的身价也水涨船高至1090亿美元,超过英特尔市值。更震撼的是,他主导的CUDA生态已绑定全球90%的AI企业,连OpenAI训练GPT-5都要向英伟达...
黄仁勋2小时炸场!1000亿砸向OpenAI建工厂,十万亿市值稳了?
这就是AI对就业的真实影响:消灭重复劳动,释放创造潜力。黄仁勋预测,2030年将出现“AI训练师”“数字分身运营师”“机器人伦理顾问”等新职业,而消失的只是“按流程办事”的岗位。就像计算机没消灭文员,而是创造了程序员、产品经理——AI不会让人失业,只会让人“换一种方式工作”。结语:别猜曲线,先上车 “...
【长期主义】第208期智能说:OpenAI首席科学家Ilya Sutskever
这场聚会上,他们解释说他们想创建新的人工智能实验室。 对Ilya Sutskever来说,这是相当完美的时机,因为他一直梦想创建自己的人工智能公司。 他们创立OpenAI,几年之后,这家公司成为AI研究的领导者。著名的GPT,这是能够创建令人惊叹的真实对话的深度学习模型。就像在这个例子中,GPT(Norn)将程序员引入一个神秘的世界:...
OpenAI宋飏被Meta挖跑了!扩散模型崛起关键人物,加入MSL再会师清华...
来到OpenAI之前,宋飏在斯坦福大学攻读计算机博士,师从斯坦福计算机系副教授Stefano Ermon。这位导师团队曾连续两年获得ICLR杰出论文奖。其中一次,一作正是宋飏。而要被视作为扩散模型提供早期贡献的,还要属被NeurIPS 2019接收并做口头报告的工作《Generative Modeling by Estimating Gradients of the Data Distribution》。...
万字长文揭秘黄仁勋:AI“军火商”大BOSS,是如何炼成的?
尽管英伟达没有满足辛顿的要求,但辛顿还是强烈推荐他的学生们使用Cuda平台。其中一位乌克兰的学生亚历克斯·克里切夫斯基(Alex Krizhevsky)被辛顿誉为可能是他见过的最出色的程序员。2012年,克里切夫斯基和他的研究伙伴在预算十分有限的情况下,从亚马逊购买了两块GeForce显卡。随后,他开始使用英伟达的并行计算平台来训练一个用于视觉识别的
GPU之王联姻ChatGPT之父!1000亿交易藏猫腻?司法部紧急关注!
范德堡大学法学院教授Rebecca Haw Allensworth的担忧并非空穴来风:“当英伟达向OpenAI注入千亿资本,两家公司的财务利益就形成了深度绑定。这就像芯片供应商突然成了下游厂商的股东,谁能保证它不会给‘自家人’开绿灯?”现实中,这种“绿灯”可能以多种形式存在。比如,当全球GPU芯片供不应求时,英伟达是否会优先保障...
马斯克刚走,“狠人”黄仁勋要来了 - 知乎
根据英伟达2017年的一项估计,为了让程序员而不仅仅是图形专家使用英伟达的芯片,黄仁勋在这项软件工程上花费了至少100亿美元。黄仁勋赠送CUDA软件,但该软件只适用于英伟达的芯片。 一位芯片行业人士说,英伟达最强大的不是GPU等硬件,而是生态系统,每一家试图进入图形计算市场的厂商都要使用它的软件,同时,为了发挥最佳性能...
OpenAI的灵魂人物,首席科学家Ilya Sutskever - 知乎
去年11月突然推出ChatGPT震惊世界的OpenAI,在整整一年后以闪电解职CEO再次震惊世界。有不少人以为这拿的是乔布斯的剧本,错了,这其实是天才科学家奋力一击的故事。OpenAI的灵魂人物不是CEOSam Altman,而是其创始人之一、首席科学家Ilya Sutskever。 首席科学家Ilya Sutskever先和三位独立董事谈话,说服了他们,凑够了四...
精读丨苏茨克弗专访:那个想推翻 OpenAI 掌门人的黑暗骑士
就算在一个没有 OpenAI 的世界里,苏茨克弗仍然会在人工智能的历史上占有一席之地。他是以色列裔加拿大人,出生在前苏联,但从五岁起去到耶路撒冷并在那里长大(他仍然会说俄语、希伯来语和英语)。他长大后移居加拿大,在多伦多大学与人工智能先驱杰弗里...
手握剧本的英伟达还能狂飙多久? - Insights、热点洞察 - 发现报告
就连连续造神的OpenAI也是船上的一员。早在2016年OpenAI成立之初,黄仁勋就亲手将全球首款DGX交给了OpenAI,那是英伟达当时最强的浮点运算GPU,同时还留下了一句话:“为了计算和人类的未来,我向你们献上世界上第一台DGX-1。” 后面的故事大家都知道了,ChatGPT横空出世,带来算力需求的爆发式增长,Sora又进一步引爆了全球...
4年获MIT博士,成OpenAI核心,华人天才破AI核心难题!
AI技术,也只是研究员们存储更多的资料,它按用户要求找到资料。至于用户的真正意思,AI其实并不理解。而陈博远研究的世界模型,就是让AI具备理解能力。简单来说,就是给AI一个类似人类认知的大脑地图。他强调,视觉世界模型对智能非常重要。这就是让机器人,理解我们生活世界的关键。陈博远的研究,很快就在OpenAI的...
NVIDIA:AI军火商,从0到3万亿的疯狂真相,他已掌控未来? |自说自话的...
就这样,黄仁勋孤注一掷研发CUDA,而CUDA则是一种通用编程语言,能让各种程序员用市面上常见的计算机语言来直接操控英伟达GPU房间里的那一个个小学生,或者说,流言终结者这里千弹枪里的每一个炮弹。 至于程序员们操控我的小学生了能干什么? 黄仁勋不知道,全世界都不知道,可冥冥中的那个命运之神知道。
惊到了!大神炮轰CUDA:CUDA存致命缺陷,它不是未来!这种新语言将...
近日,一位大牛 Thomas Cherickal,发表了一篇博客,阐述了一种新的编程范式。他认为,基于 MLIR 的 Mojo 无疑将取代基于 LLVM 的 CUDA,而且这种方式已经几乎可以在其他任何芯片上运行,包括谷歌TPU、AMD、英特尔以及任何定制的AI芯片! 编辑| 云昭 CUDA一直被视为英伟达GPU的最强壁垒,让许多业界的玩家望洋兴叹。