长江书屋

第243章 买一送一(第3页)

天才一秒记住【长江书屋】地址:https://www.cjshuwu.com

啊——

会议室的人都惊呆了。

莫远游问:“还有提测是什么意思?那几个点是分批提的么?可是,刚才我们测试验证都没问题了啊……”

钟景航也一脸诧异,猜不出王霁的话是什么意思。

王霁笑吟吟道:“不是那几个点,那个问题我昨天就搞定了……”

将电脑屏幕转了过去:

“我看代码的时候,还发现个问题……”

本小章还未完,请点击下一页继续阅读后面精彩内容!

“你们处理大模型高稀疏矩阵效率很低,无效占比计算超过65%。”

“而且,用的加速方案需要固定稀疏模式,无法适配动态稀疏。”

“如果稀疏矩阵的非零元素位置随机,你们cache命中率下降了50%多。”

“多核并发计算时,稀疏任务分配不均,闲的闲死,忙的忙死。”

“我就顺手解决了……”

他对着电脑滔滔不绝。

丝毫没留意到,几个人表情越来越诡异。

听着听着,已经没在看电脑,而是将目光都锁到他脸上。

王霁继续说方法:

“我的优化策略是……”

“首先,增加稀疏模式检测单元,实时识别矩阵中的非零块。”

“用硬件实现自动掩码,根据当前稀疏模式来生成,跳过全零块。”

“然后,在NoC上集成优先级仲裁器,将稀疏计算任务拆分为细粒度子任务,高稀疏度任务优先分配至空闲核。”

“最后,利用你们芯片已有的稀疏、密集模式,增加动态阈值判断。”

“整体下来,Transformer推理服务模拟测试延迟能降低50%以上。”

“因为减少了稀疏计算的能耗,边缘侧芯片推理功耗降低40%以上……”

这个问题,是其余红点的报错。

今天花大半天搞定的。

反正,闲着也闲着……

就当买一送一。

讲完后抬起头,看到几张几乎在淌口水的脸。

莫远游擦了擦嘴,转头望向同样找不着下巴的CEO。

钟景航怔了半晌,才反应过来。

咽了口唾沫,对王霁道:

“小王,这个问题是我们下个版本要解决的……”

“我们准备投入20个人,集中半年时间,争取在年底前攻克……”

喜欢试用期码农,你让我拯救公司?请大家收藏:()试用期码农,你让我拯救公司?

本章未完,请点击下一章继续阅读!若浏览器显示没有新章节了,请尝试点击右上角↗️或右下角↘️的菜单,退出阅读模式即可,谢谢!

如遇章节错误,请点击报错(无需登陆)




新书推荐

好男人他有金手指[快穿]神农别闹绝世保安凌天至尊大国工程重生之都市邪仙万界时空穿越者异世界:狼人领主,我靠魅魔发家穿成窝囊小姐的贴身丫鬟快穿之路人不炮灰当反派绑定了女主系统懒妻教育得当,三胞胎有事就喊爹七十年代小娇媳西游记:四川话版太古神王明婚暗恋我和大圣是兄弟我的狗狗公司闻名世界大话之神古代小户之家奋斗史万界基因魏武侯传奇篮神全能影后的花式撩法美好生活从六零年代开始