- 0
- 0
deepseek v4对AI芯片设计有哪些启发?
热评:1. 数据放置很重要,他们的KV Cache分两种了,一种是要全部读一遍,因此要放在爆大带宽但是对容量要求不高的介质上。另外一种KV Cache不要每次都读一遍,需要gather的方式读,但是容量需求爆大,因此要另外一种内存介质上,处理器和SOC需要极高outstanding的块级别的gather能力。2. 稀疏Attention演进出各种花样的Top-K和Top-P。也就是各种排序算法。但是这种排位的K是动态的,所以硬件千万别整什么排序加速器。老老实实把histogram,cumsum,prefix sum这样的算子做好。对应的基础能力就是原子操作,load atomic带返回值, stor
原话题:https://www.zhihu.com/question/1994518544646423103 大家怎么看?
楼主最近发布
-
•英伟达突发「史上最大GPU盗窃案」,价值 1140 万美元的硬件失踪,具体什么情况?可能带来哪些影响?2026-11-09 13:27:46
-
•(转自👻吧)7.3周本机制2026-11-09 12:44:03
-
•放大看请。2026-11-09 13:11:50
-
•午饭:广式香肠蒸米饭、西红柿炒鸡蛋、炒杏鲍菇。2026-11-09 13:16:53
大家都在看
•S16 半决赛 GEN 3:0 淘汰 iG 晋级决赛,如何评价这场比赛?•中超第 30 轮,大连英博 3-1 天津津门虎,完成史诗大逆转夺冠,如何评价本场比赛?•59岁男子突发疾病后倒在站台去世,家属质疑车站配AED却没有员工会使用,车站到底应不应该担责?•如何评价波兰发生恐怖袭击致 6 死 16 伤,枪手被「极右翼意识形态」蛊惑,并「持极端民族主义观点」?•中国不申办2036年奥运会,德印韩等7国入围,举办奥运还「香」吗?奥运会的吸引力发生了什么变化?•如何评价《嫁金钗》大结局女主软禁太后杀死亲王摆下鸿门宴携胚胎以令诸侯,最后以护国长公主身份摄政天下?•比亚迪超豪华行政旗舰仰望「鼎曜」全球首秀,这款车的市场竞争力如何?•优酷被指在剧中插入占1/3屏幕,持续10秒的巨大广告,其回应可快进或自行关闭,你怎么看这种弹幕广告?•网友问今何在能否与江南一起上《后会友期》遭其无情拒绝并表示「江南是谁」,江南和今何在到底有啥爱恨情仇?•国乒法兰克福冠军赛全军覆没,暴露出哪些问题?





