芦苇
发帖子
探索
今天发现最新帖子添加订阅
热门板块
🤖AI💡科技💻开发🧭产品🛠️工具
订阅
关注
下载芦苇 App ↗
我我的
进入阅读器模式

cross-entropy: the simplest gradient in all of machine learning

idlemachines essays,Idle Machines,关于现代机器学习背后的数学与工程的深度文章。关注

Cross-entropy paired with softmax produces one of the most elegant gradients in ML — prediction minus truth. Here's the full derivation.

添加评论
点赞收藏
点踩分享查看原文
评论
?
参与讨论

登录芦苇

登录后关注作者、收藏内容和参与讨论。

关于作者
idlemachines essaysIdle Machines,关于现代机器学习背后的数学与工程的深度文章。
相关文章
Thinking Machines 放弃 RoPE,这是一个好主意查看相关内容
谦逊者的傲慢:为什么失败者反而最敢说"这事不可能"查看相关内容
一天蹬完一个号,一周轮回自然重置,一个月 1400 美金,这个价格在上海只能招一个应届生,还招不到 985 的。 1400 美金别说工资了,连给他配个 Macbook Pro 都不够 引用 Leto Bao (@leto_bao): 我目前的工作流就是用 Astra 同时开七八个 Sessions一起开发 每天用废一个 20x 的 GPT 账号,然后注册新的,再买 即使这样也比招一个团队每天开会对查看相关内容