关注前沿科技 量子位难度大升级的多任务长视频理解评测基准MLVU来了！由智源联合北邮、北大和浙大等多所高校推出。究竟有多难呢？最终排名第一的GPT-4o单选正确率还不足65%。而且研究发现，大部分模型的性能都会随着视频时长增加显著下降。研究进一步证明，提升上下文窗口，提升图像理解能力，以及使用更强大的LLM Backb...

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...

关注前沿科技 量子位测试Gemini1.5 Pro、GPT-4o等多模态大模型的新基准来了，针对视频理解能力的那种。直接在视频内容中插入多个无关的图像或文本“针”，严格评估模型对时间理解的能力。来看下面的栗子。比如插入密码词“Alice”，让模型找到这个密码词；插入苹果图片，让模型解答这个水果是什么；又或者插入多个“针”，询问...

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...

原创 关注前沿科技 量子位毕业季，大模型人才正在被各家大厂和创业公司重金哄抢。刚刚，腾讯也曝光了他们与大模型相关的人才计划，并且直通2025年校招——将面向全球范围内大举扩招50%大模型人才，并且放话薪资算力什么的不用愁。不出所料，各家抢人下手都既快又狠，晚一步生怕就抢不到（不是）。也是借这个苗头，量子位突...

原创 关注前沿科技 量子位要问现在最新潮的AI玩法？那一定是Agent智能体了。自OpenAI的GPTs带头之后，各大AI应用纷纷推出一键@不同智能体协作，以及配套的创建智能体功能。这段时间试了一下智谱清言的智能体平台，在“工具助手”里发现一批特别的存在：除了官方提供的计算器、天气查询等基础工具，还有第三方服务API接入了...

关注前沿科技 量子位将音频、图像、视频整合进同一工作流，这个由斯坦福初创公司发布的视频工具火了！预览版支持生成30S逼真视频，网友们直呼不输Luma。抢先看性转版马斯克激情说唱：<iframe class="video_iframe rich_pages" data-vidtype="2" data-mpvid="wxv_3510909584540123143" data-cover="http%3A%2F%2Fmmbiz...

清华大学电子系城市科学与计算研究中心推出了第一个无需自然语言的纯时空通用模型——UniST，首次展示了纯时空模型本身的通用性和可扩展性，研究成果已被KDD2024接收。

此外，通过与ChatGPT强强联手，面对需要更广阔知识、专长特长的任务，Siri也能够直接调用GPT-4o模型，给用户提供更加快速和准确的回答。

关注前沿科技 量子位图灵奖得主、深度学习之父Geoffrey Hinton，又有新动向。刚刚亲自官宣，将加入英国AI新材料公司CuspAI，出任顾问。选择这样做的理由，Hinton的解释是想要用AI探索新材料，进而帮助人们解决气候变化问题。至于具体的工作内容，该公司联合创始人、发明VAE的机器学习大牛、阿姆斯特丹大学教授Max Wellin...

关注前沿科技 量子位CVPR正在进行中，中国科研力量再次成为场内外焦点之一。日前，AI顶会常客选手商汤科技，已经披露了今年成绩单：50篇论文入选，其中还有9篇被录用为Oral、Highlight。这些成果，既是商汤科研和技术实力的最新证明，也透露着这家知名AI公司对于产业趋势和技术趋势的预判——论文涉及自动驾驶、机器人等前...

关注前沿科技 量子位排名超过Llama-3-70B，英伟达Nemotron-4 340B问鼎竞技场最强开源模型！前两天，英伟达突然开源了其通用大模型Nemotron的3400亿参数版本。就在最近，竞技场更新了排名情况：胜率热图显示，Nemotron-4 340B对阵Llama-3-70B的胜率为53%。究竟Nemotron-4 340B表现如何？接下来一起看看。新模型最新战绩简...

关注前沿科技 量子位苹果OpenAI官宣合作，GPT-4o加持Siri，让AI个性化生成赛道热度飙升。其实，国内已有相关研究，一项基于大模型的个性化多模态内容生成技术，直接可让AI学会为用户“量身定制”输出。例如在聊天软件中生成表情包，输入都是：我通过了，很开心！配备了个性化生成技术的聊天软件可以识别当前用户想表达的情...

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...

关注前沿科技 量子位16秒720p高清视频，现在人人可免费一键生成！无论是精致的人物肖像：还是炫酷的科幻大片：△画质已压缩亦或是生动有趣的动画：流畅的变焦效果：△画质已压缩以上生成效果，全部来自免费开源的潞晨Open-Sora。从3月发布以来，潞晨Open-Sora一直热度不减，GitHub上揽星已经17.5K。（GitHub：[链接]）英伟...

关注前沿科技 量子位曾经的视频生成王者Runway，带着大招鲨～回来了——祭出全新模型Gen-3 Alpha，并表示这是即将推出的系列模型中的首款。看过效果后，网友当即表示现在场上局势又大变样了，如图（手动狗头）：Gen-3 Alpha主打的就是一个“细致”，生成的视频可以处理复杂的场景变化，并能包含多样的电影叙事手法，艺术气息...

关注前沿科技 量子位GTP-4o挑战悬赏八百万的超难数据集，实现SOTA！数据集当中包含了各种类型的图形推理题目，被挑战发起者预言“大模型很难完成”。结果短短一周之内，这一挑战就被一位博主Ryan Greenblatt完成了一半，准确率达50%；而此前的SOTA仅为34%。针对自己的成果，Ryan发了一个表情包表示：成果发布后，Ryan所在...

一方面，3D生成面对的场景更刚需，比如在游戏、影视、工业等已知场景，还有接下来元宇宙、XRVR的未来场景，而传统3D建模苦于高昂成本、漫长的制作周期已久，这也是AI生成3D模型的巨大潜力。

原创 关注前沿科技 量子位一个“技术问题”，导致巴菲特的伯克希尔-哈撒韦公司股价暴跌近100%。想必很多小伙伴已经感受过了这则铺天盖地的消息，所带来的亿点点震撼。而根据事后的消息来看，这个大故障是纽交所的合并报价系统（CTA）在更新软件时出现了问题。许多专家都对此做了分析，有人认为是CTA软件在进行版本更新时出...

关注前沿科技 量子位只要1/200的参数，就能让大模型拥有和GPT-4一样的数学能力？来自复旦和上海AI实验室的研究团队，刚刚研发出了具有超强数学能力的模型。它以Llama 3为基础，参数量只有8B，却在奥赛级别的题目上取得了比肩GPT-4的准确率。这款模型名为MCTSr，是将AlphaGo中用到的蒙特卡洛算法与Llama3结合而成。它能用...

关注前沿科技 量子位OpenAI和谷歌接连两场发布会，把AI视频推理卷到新高度。但业界还缺少可以全面评估大模型视频推理能力的基准。终于，多模态大模型视频分析综合评估基准Video-MME，全面评估多模态大模型的综合视频理解能力，填补了这一领域的空白。Gemini 1.5 Pro在这份榜单中遥遥领先，显示出在视频理解领域的“霸主”...

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...

关注前沿科技 量子位我和马斯克友尽了。Geoffrey Hinton老爷子——图灵奖得主、深度学习发明人、AI三巨头、Ilya之师，在最新专访中透露出这个令人心碎的消息。就在这两天，Hinton接受了多家媒体的专访，既有老生常谈的内容，即他对AI发展安全的担忧；也有一些新的话题和八卦。他提到了老朋友马斯克，俩人一直以来都是AI威...

关注前沿科技 量子位如何生成高难度、指令超复杂的视频呢？北大与快手AI有解了，他们提出新框架VideoTetris，就像拼俄罗斯方块一样，轻松组合各种细节~在复杂视频生成任务中，超过了Pika，Gen-2等一众商用模型。这个框架不仅能够直接增强现有模型的组合生成，还能够支持涵盖多复杂指令、多场景变更等更高难度的长视频生...

关注前沿科技 量子位微软Build大会前脚刚放出一箩筐生产力革命最新进展：自定义Copilot、Team Copilot、Copilot扩展……这两天在微软AI Day上，Copilot到底是如何提升生产力的，直接被搬到了台面上现场演示。假设你的身份是一名公司财务，老板让你1分钟内完成报销核对，现在你有一个Excel，其中有公司报销单、银行账单这两...

关注前沿科技 量子位GPT-4o掀起一股全模态（Omni-modal）热潮，去年的热词多模态仿佛已经不够看了。要构建全模态智能，意味着能够理解任何模态并学习通用表示 (Universal Representations)。借助 MiCo，团队预训练的模型在多模态学习中表现出极为令人印象深刻的性能，在目前主流的三大类任务上的评估结果显示出：10种不...

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...

关注前沿科技 量子位让AI画漫画角色保持一致的新研究来了！创作的连环画效果belike：频繁切换主体、人物之间复杂的互动也能保持角色一致性：上述效果来自AutoStudio，是一个由中山大学和联想团队联合提出的无需训练的多智能体协同框架。AutoStudio采用基于大语言模型的三个智能体来处理交互，并使用基于扩散模型的Drawer...

为了更加了解AI Agent落地现状，量子位·视点邀请到了汇智智能联合创始人樊刚正，一同来交流AI Agent正在以什么样的方式与具体场景相融合。

关注前沿科技 量子位AI太火了！眼睛一睁一闭，一大堆新鲜出炉的前沿科技进展已经塞满未读列表。于是，今年的量子位，比以往更加缺人。这不到金三银四了，是时候拿出喇叭大喊一声：量子位招！人！啦！量子位编辑智能车编辑汽车视频工作室主理人量子位短视频主编量子位视频后期量子位商务经理智库分析师知乎微博新媒体运营...