基座模型田柯宇从不缺卡

事情大家都知道了,田柯宇昨天一炒作,一堆人联合出来打假田神,不仅列时间线、列代码、还列上了自己的Github主页,搞学术的就是严谨啊👇

https://keyu-tian-sabotage.github.io

你们代入一下田神对面实习生们的视角,简直是绝望啊。

每天就看到训练模型的参数乱动,但也不知道哪里乱动,去排除故障也没法归因,因为田神跟你一起开排除故障的会议,田神完全知道你的所有动作。

这不就智子吗?智子知道人类的一切活动,但人类不知道三体人在想什么,在干什么,也不知道智子在哪里。

若干年后的科技史一定会记载:公元2024年,三体人田神向字节实习生发起了智子攻击。

大伙事后疑惑他怎么一边攻击,一边自己的模型的进展还很顺利时,才发现他部署在内部供大家测试的模型,是已经开源的 Text-to-Image 模型。

为了不被发现,田神让用户输入的所有Prompt都会自动加上自动 「City」前缀,大伙才明白此前生成图像的背景中为什么会有城市建筑轮廓。

这就跟《三体》里人类发现智子,智子在所有人的虹膜上留下四个字「你们是虫子」这件事对上了!所以田神完全是智子转生。

当然这些事情是指控者说的,属于对家黑田神的。

现在字节起诉田柯宇的案件已经进入二审阶段了,一审判决结果是让田柯宇赔50万,50万对比现在田柯宇融的钱就是一瓶冰红茶,该赔就赔了。

然而字节跳动还是上诉了,因为他们的诉求是让田神赔800万。

我觉得这个事情怎么说呢?假如田神说的所有话都是真的,没有持续两个月攻击训练代码,而是「让GPT帮我写了一个程序,让程序停掉或卡住」,时间也更短,「大概十天左右的时间里,总共五次左右。」

那对字节的损失根本没那么大,那字节居然索赔田神800万元,居心何在?

总不可能是田神不是在十天范围里手动攻击了五次,而是如指控者所说的持续两个月攻击吧,田神都发誓他说的是真的了。

那我只能理解为这个字节跳动肯定是没钱买卡了,想从田神那搞点钱来买卡😭

哎哟我操字节跳动怎么这么坏呀。等我田神的世界模型能够预测世界了,你们这公司肯定被干飞。

另外,这个案件是民事案件,不涉及刑事责任,所以田神是不用坐牢的。

大家是不能叫他「牢田」,更不可以把「牢田」贴在饮料瓶上,这是不对的。

咸鱼发了条即刻让大家理性讨论,田柯宇这种人能融到钱究竟是时代的红利还是时代的悲哀?

他觉得应该是时代的红利。因为在移动互联网时期,所有人都喷孙宇晨傻逼,但孙宇晨是那一波创业者中拿到最大结果的人。

我们相信以田柯宇的城府,被字节跳动干成这样,依旧能以两亿美金的估值爆了五源、IDG和钟鼎三千万美金,具备如此能打逆风局的能力,以后的成就不会亚于孙割。

孙割前两天还说什么谁让他加入OpenAI,他愿意花5000万美元。

说白了这5000万美元你直接给田神得了,那不就相当于加入了全世界一流的AI lab ,还能再次宴请年少的自己呢。

田神辩经属于是路走窄了,说你投毒了有什么好辩的,此时此刻出来说我没有投毒有啥意义,

不如直接和孙割一起请个健身教练开始练薄肌,每天在狂喝大水。此时此刻太阳系里边还有谁比这两个人更版本答案?

当然,事实上田神也没有投毒,因为投毒是一个化学概念,我理解大伙都身体健康就说明田神没有投毒,所以千万不要再污蔑田神了。

哦对,非常巧合的是,IDG当年就是孙宇晨的投资方。IDG眼光实在太好了,属于是又投了个孙宇晨。我看御三家胜负已分,红杉高瓴拿什么比?!

不过我的朋友程哥对此提出了相反的意见:「田柯宇违法了,孙宇晨可没有违法。孙宇晨是彻头彻尾的理想主义者,是田柯宇的反面。

而且孙价值观很正,嫉恶如仇。他一再嘱咐自己的父亲不要贪腐,还有一个例子是:他把贪污他公司钱的手下都送进去了。」

也有道理吧。

我个人最佩服田柯宇的还是他称自己为基座模型创业者。

没错,不是大语言模型、不是视频模型、更不是世界模型,而是基座模型!

因为现在炒作自己是世界模型、具身模型路就走窄了,因为炒作狗太多,鱼龙混杂,你分不出来水平。

那基座模型这个词就非常好,进可500亿美金Kimi,退可2亿美金小爆一笔。

估值2亿美金什么概念?我给大伙举个例子,字节的Trae负责人石扬联手字节数据安全负责人出来创业,估值也就是2亿美金,两个高管加起来约等于田神。

说明什么?说明字节最强实习生相当于4-2。冕神28岁才是4-1,之前还一直拿这个职级炒作。田神是近00后,所以田冕谁高谁低毋庸置疑。

冕神已死,田神当立!

不过也有资深投资人向我指出,田神完美命中投资老登爽点,因为VC就爱投造反的,只是他们低估了田神在研究员群体里引起的公愤程度。

对此我只能评价,造反之间亦有差距,切格瓦拉和波尔布特还是有区别的。当然,田神是三体人,超出五行外,不在我们的评论范围。

老样子,我们直接蒸馏田神接受采访的原话,并随机附上几位同期字节er的打假和我们的理解:

01

个人从没缺过卡,投毒主要出于正义感

1、21年开始我在字节实习,24年来了个新的实习生,后来我就觉得整个组不太安宁。他先有一些软性的占用——就像占座一样,占了本来属于别人的资源,后来会开始直接停止别的程序。

我田神说了,是别的实习生先停别人卡了,那就别怪他不客气了。这属于个人英雄主义。

2、其实他从来没有停止过我的(卡),而是停止一些性格比较内向的软的人。我们对leader反馈过这件事,

但没有得到解决。然后我就用我的方式——这个方式当然是错误的——我进入了对方的程序,把他的卡住、或关停。这样一来他超额的资源就会被收回,其他人就能正常使用了。

哎呀,田神实在是太有正义感了,其实自己都没受影响,这个Leader怎么也不作为呀, 害我田神吃官司😭

3、实际上我个人从没缺过卡。

就算字节跳动缺卡也不会让我们田神缺卡的,OpenAI都缺卡但田神就是不缺卡!

4、我必须说这一点,「说我嫁祸其他人」——这是完全没有的,也是我当时最不解、以及情绪最强烈的一句话。敢做不敢当,不是我的价值观。

我的确报了警。其实是因为当时公司找到我,问我知不知道这些帖子是谁发的,我说我不知道,想看警察能不能查是谁发的,和公司确认后,我去报的警。

致敬最诚实、最勇于承认错误的田神。但我说真的,敢做敢当公司找来直接承认自己干的不就好了,还找警察问帖子谁发的干啥?

5、(我发誓),关于病毒,关于攻防,都是空穴来风。

田神都发誓了,难道还能是恶意的吗?

6、这不是一个投毒,也不涉及攻防,我是让GPT帮我写了一个程序,让程序停掉或卡住。

其次,我是手动、点状地停掉了对方的程序,完全没有持续两个月之说...大概十天左右的时间里,总共五次左右。

听田神这话,我感觉是对面实习生这么菜,直接被GPT程序干碎了,我田神点点鼠标就把你们崩飞了。

再来看对面的描述:「根据事后复查,Tian 的破坏行为涉及多个层面。首先,他直接修改了训练集群中的 PyTorch 源代码,对随机种子、优化器和数据加载等关键环节进行干预。

这些组件直接影响模型训练的数据顺序、参数更新以及数值计算结果,因此相关篡改可能导致训练结果出现难以预测的偏差。

其次,他通过随机终止多机训练任务中的部分进程,导致原本正常运行的大规模实验突然卡死。更隐蔽的是,攻击代码还利用 checkpoint 作为载体建立登录后门,使得后续攻击能够被自动触发,并随机终止训练进程。

这些攻击手段的共同特点,是将人为破坏伪装成随机出现的软件故障、数值异常或基础设施问题。」

7、我觉得字节不仅在实习生资源支持上,还是交流氛围上都很好。

对面视角:「Tian 一直参与项目的 Debug 沟通群组,甚至参加训练集群的日常故障排查会议。团队成员每天汇报新发现的异常、讨论可能的原因、分享排查思路,并据此制定后续的实验和修复方案。

而 Tian 则能够直接了解到这些信息,并根据同事们的排查方向,持续、有针对性地修改自己的攻击代码。」

这确实交流氛围很好。

8、我想把当时这个行为叫做「朴素的正义」,但的确是很不成熟的。就比如走在大街上遇到什么事情,我可能会有比较冲动的方式去做。

对面视角:「2024 年 7 月 30 日早上,团队成员在排查训练异常时,意外发现某台机器的 Docker 环境中,PyTorch 源代码的 DataLoader 部分存在明显异常的代码。这并不像正常的开发修改,而是具有明显的人为恶意篡改迹象。

结果发现,团队当天便将这一发现上报,并进一步检查了该机器的登录记录。除机器所有者外,只有 Tian 曾登录过这台机器。

2024 年 7 月 31 日。团队另一名成员在 Tian 的个人目录下发现了大量疑似用于破坏训练系统的代码,其内容令人震惊。」

9、我不是谣言里那个大恶人。

没错,田神是好人,是为了测试字节网络安全能力才这么干的,没想到这么不经打。这波字节跳动要反思。

02

基座模型创业者的自我修养

10、我对世界模型的定义为预测未来。今天的定义太多,实现太少。我们23年就定了这个方向,主要关注实现。

田神2023年在字节实习的时候就意识到自己要做世界模型了,领先李飞飞两整年,完全没有蹭的意思。等田神能预测未来了,你们这些黑子都完蛋!

11、我不在意是否我们的公司被标记为(世界模型)这个标签,既不主动去贴,也不避之不及。反正我们就是做一个多模态基座模型嘛。

对的,大伙现在对世界模型的定义已经过时了,要叫我们的全称:多模态基座模型。

12、我们是今天所有(世界模型)路线中最先驱的一条。在World model上,我们观察到了和语言模型一样的预训练Scaling law。这种近千亿还没有饱和的Scaling Law是唯一。

牛逼,田神已经宇宙厂悟道了,世界模型的Scaling Law即将到来。

13、世界模型的终极形态是 Predict everything。比如我拿100亿年前,我把宇宙大爆炸之初的那一团物质状态输给World model,它往后可以推演100亿年。

再一个直观的例子,类似漫威里面的奇异博士:他和灭霸斗争的时候,看到了好多种不同的未来,最后只有一种成功了。

我悟了,田神一定是奇异博士本人,他在几千种未来中找到了唯一能拿到融资的办法:为缺卡者抱不平!

14、这个领域之所以吸引我是因为,人没教它,它可以自发学东西。就比如看了大量图片后,它能朦朦胧胧地感觉到猫跟狗的区别。语言模型也可以自学,但语言首先是人造的。我更喜欢蒸馏自然,而不是蒸馏人。

田神看到了语言模型的终局😭你的眼睛到底能看到多远啊田神

15、当我们想算命,我就去抛三枚铜币,它们在空中的那一瞬间,World model也应该可以预测出来。以前是很难的,但现阶段我们已经实现了。

这还说啥了,今天这些黑子喷田神想必他也已经预测到了的👍

16、假如我说了假话,那么我终生研究受挫。

祝田神拿下新一届最佳论文。

最后我们留一个思考题,田柯宇到底能不能算字节系创业者?

要论田神和字节系的瓜葛、和字节系的联系,这份羁绊肯定比绝大部分字节员工都要深,毕竟绝大多数员工都没被字节起诉过,而田神是正儿八经被字节起诉过的,很可能是有史以来第一个被字节起诉的实习生。

所以田神和字节跳动的羁绊非常深,那他毫无疑问是字节系的创业者。

不过我认为应该算字节化学系创业者,适合干AI4S。

(本文封面由ChatGPT生成,纯人工写作)

添加评论
点赞收藏
点踩分享查看原文
评论
?
参与讨论