DeepSeek新版模型正式发布，技术大佬们都转疯了！ 延续便宜大碗特点的基础之上，DeepSeek V3发布即完全开源，直接用了53页论文把训练细节和盘托出的那种。
“人类将在2029年实现AGI。” 这是2006年,雷·库兹韦尔(Ray Kurzweil)在波士顿人工智能大会上发出的惊人之语。
据不完全统计，已有24家券商积极拥抱AI大模型，在投研、投顾、风控、运营等多个领域展开了深入探索和应用。
在今天的文章开始前，小雷想问大家一个问题：你的手机上，用的是什么输入法？ 小雷问了问身边人，回答无非是：搜狗、讯飞、百度和近些年异军突起的微信输入法，大部分人到手都会安装自己顺手的输入法，其中只有极少人会长期使用自带输入法。
2024年不愧是“具身智能元年”。 在刚刚结束的第十三届中国创新创业大赛新技术赛道中，一家具身机器人公司脱颖而出，斩获总决赛亚军，跻身全国50强。
IT之家 12 月 27 日消息，理想同学 App 现上架苹果 App Store，商店页面显示该应用当前版本为 1.0.0、大小约 89.2MB，是由理想汽车依托自研大模型打造的人工智能应用。
终于，谷歌新一代视频生成大模型 Veo2 把 Sora 给秒了：「更懂人间烟火」、「懂电影拍摄技巧」、「分辨率高达 4K 」……
在当今迅速发展的人工智能时代，大语言模型（LLMs）在各种应用中发挥着至关重要的作用。然而，随着其应用的广泛化，模型的安全性问题也引起了广泛关注。
最近，类 o1 模型的出现，验证了长思维链 (CoT) 在数学和编码等推理任务中的有效性。在长思考（long thought）的帮助下，LLM 倾向于探索、反思和自我改进推理过程，以获得更准确的答案。
大模型中，线性层的低比特量化已经逐步落地。然而，对于注意力模块，目前几乎各个模型都还在用高精度（例如 FP16 或 FP32）的注意力运算进行训练和推理。并且，随着大型模型需要处理的序列长度不断增加，Attention（注意力运算）的时间开销逐渐成为主要开销。
