只激活3.8B参数,性能比肩同款7B模型!训练微调都能用,来自微软
只激活3.8B参数,性能比肩同款7B模型!训练微调都能用,来自微软只需激活60%的参数,就能实现与全激活稠密模型相当的性能。
来自主题: AI技术研报
10783 点击 2024-07-18 16:44
搜索
只需激活60%的参数,就能实现与全激活稠密模型相当的性能。
让大小模型相互博弈,就能实现生成内容可读性的提升!
刚刚,信息检索领域的国际顶会SIGIR 2024,公布了最终获奖结果。在所有获奖名单中,来自清华计算机系的团队们斩获了两大奖项——时间检验奖、最佳论文奖,实至名归!
当我们不停在CoT等领域大下苦功、试图提升LLM推理准确性的同时,OpenAI的对齐团队从另一个角度发现了华点——除了准确性,生成答案的清晰度、可读性和可验证性也同样重要。
AI读屏搜索、总结画图样样精通,智能戒指很科幻。
流量焦虑、可行的商业化模型是背后的推动力。
AI编程工具对程序员到底是颠覆还是辅助?
相比于其他融合多模态AI交互与大模型技术产品,「京东方」更注重产品使用过程中的信息安全问题。
微软推出AI模型SpreadsheetLLM,提升电子表格处理效率。
AI 视频生成公司 HeyGen 最近完成了 6000 万美元的 A 轮融资,公司估值已达 5 亿美元。此次融资由 Benchmark 领投,Conviction、Thrive Capital 和 Bond Capital 参与。截至目前,HeyGen 已累计筹到 7400 万美元。