1-bit大模型还能再突破！新一代BitNet架构启用4位激活值
1-bit大模型还能再突破！新一代BitNet架构启用4位激活值近日，BitNet系列的原班人马推出了新一代架构：BitNet a4.8，为1 bit大模型启用了4位激活值，支持3 bit KV cache，效率再突破。
来自主题: AI技术研报
8460 点击 2024-12-05 11:12
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
近日，BitNet系列的原班人马推出了新一代架构：BitNet a4.8，为1 bit大模型启用了4位激活值，支持3 bit KV cache，效率再突破。
就在刚刚，Google Deepmind 深夜放大招，发布了最新基础世界模型 Genie 2。 想体验游戏世界？未来只需一张图片就能实现。 作为一个基础世界模型，Genie 2 能够凭借开局一张图生成各种可操作、可玩的 3D 环境。
2023 年，阿里妈妈首次提出了 AIGB（AI-Generated Bidding）Bidding 模型训练新范式（参阅：阿里妈妈生成式出价模型（AIGB）详解）。
AI技术正重塑全球就业市场。在生成式AI、边缘计算等前沿领域，技术突破不断，职业需求迅猛增长。根据斯坦福《THE AI INDEX REPORT 2024》，生成式AI相关招聘岗位在2023年增长了13倍，成为就业市场增长最快的细分方向之一。
围剿英伟达，数十万颗自研二代芯片超算在建！亚马逊祭出地表最强全家桶，多模态Nova击败GPT-4o。
华中科技大学研发的UniSeg3D算法，能一次性完成三维场景中的六项分割任务，提升了场景理解的全面性和效率。通过任务间的信息共享，优化了性能，为虚拟现实和机器人导航等领域带来新的解决方案。
智能涌现独家获悉，12月3日晚间，商汤科技董事长&CEO徐立发布内部信，宣布商汤科技已完成战略重组，未来将聚焦核心业务AI云以及通用视觉模型，智能汽车”绝影”、家庭机器人“元萝卜”、智慧医疗、智慧零售等业务将拆分为独立公司，各设独立CEO。
亚马逊宣布扩建AI计算集群并推出新AI产品。 豪掷80亿美元后，亚马逊“绑死”Anthropic，要建全球最大AI计算集群。
2023年紧急成立的Seed团队，某种程度上承担了AI Lab最初成立时被赋予的角色；
李飞飞的World Labs首个「空间智能」模型，刚刚诞生了！一张图生成一个3D世界，网友惊呼：太疯狂了，我们进入了下一轮革命，这就是视频游戏、电影的未来。