富士通PHOTON架构性能超Transformer 475倍，革新多查询处理
创始人
2026-06-25 18:53:19
0次
6月25日，富士通在日本宣布了其最新开发的PHOTON架构，该架构在多查询场景下的性能可达到主流Transformer架构的475倍。PHOTON架构通过在语义层面进行分层处理，相较于Transformer的词元级分割，能够降低计算复杂度并提供更好的并行性。这一技术革新使得PHOTON在处理智能体系统等多I/O流程时更为高效，同时降低了GPU成本。
PHOTON架构在多查询的决策环节采用多数决定或选择最佳的方式，仅需一次推理即可完成。测试结果显示，在600M、900M、1.2B等参数规模相对较小的模型中，PHOTON实现了更高的迭代吞吐量和更低的内存占用。特别是在1.2B模型上，PHOTON展现了475倍的性能提升，尽管在质量上略有下降。此外，由于PHOTON架构每次迭代所需的KVCache更少，还能提升最大迭代次数。
相关内容
热门资讯
四川雷波通报“低分班级教师上台...
8月28日，四川凉山雷波县人民政府发布致歉声明，全文如下：近日，雷波县2026年秋季教育行政会议中出...
广州荔湾区首届“荔湾礼物”设计...
2026年8月28日下午，“囍悦岭南·创想荔湾”文创设计大赛暨首届“荔湾礼物”设计比赛决赛路演和评审...
三宗宅地成交超118亿元！广州...
2026年8月28日，三部门印发《关于完善商品住房销售制度的通知》，部署各地稳步推进商品住房销售制度...
巴基斯坦专家：上合组织为全球南...
巴基斯坦智库全球丝绸之路研究联盟创始主席泽米尔·阿万近日在接受采访时指出，当西方大国热衷于“秀肌肉”...
视频丨多方携手 吉隆泥石流受灾...
面对西藏吉隆县遭遇泥石流灾害后，可能出现次生灾害等隐患，当地快速启动应急响应，开展群众转移安置工作。...
市场纠纷市场解！近三年广东法院...
8月28日，广东省高级人民法院发布广东法院2025年度商事金融十大案例，涵盖资本市场、公司治理、资金...
终身学习的最高境界是什么？南国...
8月28日下午，2026南国书香节“灯塔计划学习大会·领航者说”活动在广交会展馆B区10.2号馆一号...
书记掌勺、特教护航：一场为期5...
8月17日至21日，广州市番禺区市桥街怡乐社区，党群服务中心迎来了8名特殊孩子。5天时间，他们在这里...
“14.99万起！上汽大众途观...
今日，上汽大众宣布途观L Pro 2027款正式上市，限时置换价14.99万元起。新车提供300TS...
亿航EH216-S无人驾驶电动...
今日，亿航智能宣布其EH216-S无人驾驶载人电动垂直起降（eVTOL）航空器在香港数码港成功完成公...