DeepSeek发布多模态论文又连夜删除,主要透露了啥?

admin21小时前天气预报10

  在节假日前一天发布重磅论文,“这很DeepSeek”。

  DeepSeek终于能“看见”了。前两天,DeepSeek偷偷开启了多模态能力的灰度测试,部分用户打开DeepSeek首页会发现,界面多了一个“识图模式”的入口。上传图片后,DeepSeek能像人一样理解画面了。

DeepSeek发布多模态论文又连夜删除,主要透露了啥?

  DeepSeek多模态团队负责人陈小康在4月29日发文称,“现在,我们能看见你了。”这是DeepSeek的聊天产品第一次接入多模态。

  就在4月30日,DeepSeek又发布了一篇关于多模态技术报告《Thinking with Visaul Primitives》(《用视觉原语思考》),阐释了这次上新的多模态技术背后的细节。

  在五一节假日前一天发布重磅论文,“这很DeepSeek”。但很快大家发现,官方连夜删除了多模态仓库和论文原文,5月1日打开Github界面已经是“404”状态。

DeepSeek发布多模态论文又连夜删除,主要透露了啥?

  关于删除原因官方并没有特别说明,不过有猜测不是内容问题,而是信息透露太多。

  这次的论文说了些啥?从行业反馈来看,论文符合DeepSeek扎实且务实的风格,同样在通过工程能力降低成本,采用了新的范式,也意味着,DeepSeek开始在视觉模型上发力了。

  具体来看,DeepSeek的论文指出,目前的多模态模型在复杂任务上崩溃,不是因为看不见(感知鸿沟),而在于“指不准”(引用鸿沟)。

  自然语言天然具有模糊性。当用户要求模型处理复杂的空间布局时,仅靠文字描述很容易产生歧义。就像数一堆散落的硬币,如果不用手指逐个按着确认,人类也很容易数错或数重。

  DeepSeek的解法是给模型配上一只“手指”。通过引入“视觉原语”(Visual Primitives)框架,模型将点、边界框等空间标记提升为最小思维单元。这意味着模型在推理时,能够一边“想”一边“指”,将抽象的语言逻辑指向到具体空间坐标。

  这一灵感借鉴了人类的认知。论文提及,人类走迷宫或数密集物体时,会用手指这类指示性指向来降低认知负荷、维持逻辑一致性。通过将视觉原语嵌入思考,模型可以模拟人类这种“指向-推理”的协同。

  这一模型基于DeepSeek-V4-Flash(总参数2840亿)构建。DeepSeek的大量实验表明,该方法在推理精度上实现显著突破,在空间推理、视觉问答等挑战性任务上,性能持平或超越 GPT、Claude、Gemini 最新版本。

  DeepSeek的研究证明:多模态智能的未来,不只是 “看见更多像素”,而是构建语言与视觉之间精准、无歧义的指代桥梁。

  值得一提的是,DeepSeek在4月24日发布了V4系列旗舰模型,这次发布并没有涉及传言已久的多模态。官方当时对V4的定义是:支持百万字超长上下文,在 Agent(智能体)能力、世界知识和推理性能上均实现国内与开源领域的领先。

  多模态已经成为当前大模型更新的一个重要方向,而DeepSeek在这一方面却迟迟未跟上,这也被认为是DeepSeek能力上的一大短板。也有传言称,DeepSeek暂缓多模态生成的训练策略,主要源于算力和现金的掣肘,在融资后,或许这一方向的训练会更加顺利。

相关文章

马斯克为何选择不锈钢造星舰

马斯克为何选择不锈钢造星舰

  埃隆·马斯克转发不锈钢星舰相关贴文,并配文:“不锈钢星舰。”   该贴文表示,“所有人都以为未来属于碳纤维。埃隆・马斯克却从物理原理出发,为星舰选择了不锈钢。不锈钢在低温环境下强度更高,更能承受重...

俞浩采访盛赞王传福:伟大程度丝毫不亚于马斯克,甚至更伟大

俞浩采访盛赞王传福:伟大程度丝毫不亚于马斯克,甚至更伟大

  炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!   来源:晚点LatePost   原标题:对话追觅俞浩:我的真实世界   追觅创始人 俞浩   从百万亿公司到为人类探...

酒价内参3月26日价格发布 飞天茅台下调4元/瓶

酒价内参3月26日价格发布 飞天茅台下调4元/瓶

新浪财经“酒价内参”重磅上线 知名白酒真实市场价尽在掌握 新浪财经“酒价内参”过去24小时收集的数据显示,中国白酒市场主要单品的终端零售均价在3月26日呈轮动分化态势。如果主要单品各取一瓶整体打包售卖...

我是山东人,去了趟连云港,不吹不黑,连云港比网上评价的还要好

我是山东人,去了趟连云港,不吹不黑,连云港比网上评价的还要好

我是山东人。 连云港这个地方,说实话,之前心里也打过问号。 网上一堆人说什么“荒”“一般”“不值得专门去”,看多了难免受点影响。 这次正好忙里偷闲,心一横,买了票就去了。 现在回头看,只能说一句实话。...

李迅雷|扭转政绩观偏误:重新审视投资与消费的逻辑

李迅雷|扭转政绩观偏误:重新审视投资与消费的逻辑

(来源:万博新经济观察) 李迅雷   中泰国际首席经济学家 以下观点整理自李迅雷在CMF宏观经济热点问题研讨会(第116期)上的发言 本文字数:2449字 阅读时间:8分钟 李迅雷:从当前经济结构看...

欧盟警告:UPM与Sappi造纸合资企业或导致价格上涨

  欧盟反垄断监管机构周二对芬兰林业集团UPM-Kymmene与南非木纤维生产商Sappi拟议的造纸合资企业展开深入调查,警告称该交易可能削弱竞争并导致价格上涨。   这笔价值14.2亿欧元的交易拟将...