AI 每日资讯 — 2026-05-23

AI 每日资讯 — 2026-05-23 🔥 HuggingFace 每日论文 1. Sensor2Sensor: Cross-Embodiment Sensor Conversion for Autonomous Driving Jiahao Wang, Bo Sun, Yijing Bai 本文针对自动驾驶系统(ADS)训练与验证中高质量、多样化传感器数据稀缺的问题,提出Sensor2Sensor框架,实现从野外单目行车记录仪视频到高保真多模态自动驾驶日志(含多视角图像与LiDAR点云)的跨形态传感器转换。为解决无配对数据难题,该方法创新性地利用4D高斯溅射(4DGS)对真实AV日志进行4D重建与虚拟视角渲染,生成合成配对数据;进而基于扩散模型完成逆向生成式转换。实验表明,生成数据在几何一致性、语义保真度与物理合理性方面显著优于现有方法,并成功将互联网及真实dashcam视频转化为可用于ADS训练与测试的多模态格式,有效拓展了外部数据源的应用边界。 PDF · arXiv | ❤️ 20 2. Gated DeltaNet-2: Decoupling Erase and Write in Linear Attention Ali Hatamizadeh, Yejin Choi, Jan Kautz 本文提出Gated DeltaNet-2,旨在解决线性注意力中压缩记忆编辑过程中的关键瓶颈:传统方法(如KDA和Gated DeltaNet)使用单一标量门控同时控制“擦除”与“写入”,易导致语义混淆。该模型引入解耦的通道级擦除门 $b_t$ 和写入门 $w_t$,实现对键空间遗忘与值空间更新的独立调控,并统一了KDA与Gated DeltaNet为特例。进一步,作者推导出融合通道衰减的块状WY快速权重更新算法及门控感知反向传播机制,兼顾训练并行性与推理效率。在1.3B参数规模、100B FineWeb-Edu数据上训练后,Gated DeltaNet-2在语言建模、常识推理与长程依赖任务上全面超越Mamba-2、Gated DeltaNet、KDA及Mamba-3变体。 🏛️ Yejin Choi | PDF · arXiv · 代码 | ❤️ 11 3. Diversed Model Discovery via Structured Table Discovery Zhengyuan Dong, Renée J....

五月 23, 2026 · 6 分钟 · Pan

AI 每日资讯 — 2026-05-22

AI 每日资讯 — 2026-05-22 🔥 HuggingFace 每日论文 1. You Only Need Minimal RLVR Training: Extrapolating LLMs via Rank-1 Trajectories Zhepei Wei, Xinyu Zhu, Wei-Lin Chen 本文揭示了强化学习与可验证奖励(RLVR)训练中大语言模型参数轨迹的低秩几何特性:其权重更新高度集中于一个可线性演化的秩-1子空间。基于此发现,作者提出轻量级方法RELEX,仅需短窗口(如前50步)观测即可通过线性回归外推后续检查点,无需额外可学习参数。在Qwen2.5-Math-1.5B、Qwen3-4B-Base和Qwen3-8B-Base三个模型上,RELEX以仅15%的训练步数即达到或超越完整RLVR性能,在域内与跨域推理基准上均表现优异;更可外推至观测长度的10–20倍(如50步→1000步),持续提升性能。消融实验进一步证实:提升秩数或引入非线性建模均无增益,验证了该方法的极简有效性。 PDF · arXiv · 代码 · 项目 | ❤️ 38 2. Uni-Edit: Intelligent Editing Is A General Task For Unified Model Tuning Dian Zheng, Manyuan Zhang, Hongyu Li 本文提出Uni-Edit——首个面向统一多模态模型(UMM)调优的智能图像编辑通用任务。针对现有混合多任务训练因任务冲突导致性能折衷的问题,Uni-Edit通过单一任务、单阶段训练与单数据集,同步提升模型的图像理解、生成与编辑能力。作者指出图像编辑天然融合理解与生成需求,并构建首个可扩展的自动化数据合成流程,将VQA数据转化为含嵌套逻辑与问答结构的复杂编辑指令,生成高质量数据集Uni-Edit-148k。在BAGEL和Janus-Pro上的实验表明,仅用Uni-Edit微调即可全面增强三大能力,无需额外模块或辅助训练策略。 PDF · arXiv · 代码 · 项目 | ❤️ 17 3. Mem-π: Adaptive Memory through Learning When and What to Generate Xiaoqiang Wang, Chao Wang, Hadi Nekoei...

五月 22, 2026 · 6 分钟 · Pan

AI 每日资讯 — 2026-05-21

AI 每日资讯 — 2026-05-21 🔥 HuggingFace 每日论文 1. MSAVBench: Towards Comprehensive and Reliable Evaluation of Multi-Shot Audio-Video Generation Yujie Wei, Yujin Han, Zhekai Chen 本文针对多镜头音视频(MSAV)生成模型缺乏系统、可靠评估方法的问题,提出首个综合性基准MSAVBench及自适应混合评估框架。该基准覆盖视频、音频、镜头、参考四大维度,支持最多15镜头的多样化任务与非现实场景;评估框架引入自适应镜头分割校正、实例级主观评分准则及工具驱动的证据提取机制,显著提升鲁棒性与人类判断一致性(Spearman相关系数达91.5%)。对19个前沿闭源与开源模型的系统评测表明,现有方法在导演级控制与细粒度音视频同步方面仍存在明显短板,而模块化或智能体式生成范式有望弥合开源与闭源模型间的性能差距。 PDF · arXiv | ❤️ 11 2. PixVerve: Advancing Native UHR Image Generation to 100MP with a Large-Scale High-Quality Dataset Haojun Chen, Haoyang He, Chengming Xu 本文针对超高清(UHR)图像生成中高分辨率数据稀缺、建模困难等核心挑战,构建了首个开源百万级像素(≥100MP)文本到图像数据集PixVerve-95K,涵盖95K高质量图像及七维细粒度标注。基于该数据集,作者首次系统性地将多种T2I基础模型原生扩展至100MP分辨率生成,并提出三种高效训练策略。进一步,设计了融合传统指标与多模态大语言模型评估的PixVerve-Bench基准,全面衡量UHR图像的视觉质量与语义一致性。实验验证了方法的有效性,并为未来UHR生成研究提供了重要数据、模型与评估范式支撑。 PDF · arXiv · 代码 · 项目 | ❤️ 8 3. Draft Less, Retrieve More: Hybrid Tree Construction for Speculative Decoding Yuhao Shen, Tianyu Liu, Xinyi Hu...

五月 21, 2026 · 6 分钟 · Pan

AI 每日资讯 — 2026-05-20

AI 每日资讯 — 2026-05-20 🔥 HuggingFace 每日论文 1. LongLive-2.0: An NVFP4 Parallel Infrastructure for Long Video Generation Yukang Chen, Luozhou Wang, Wei Huang LongLive-2.0 提出了一种基于 NVFP4 的全栈并行基础设施,专为长视频生成的训练与推理优化设计。其核心创新包括:训练阶段引入序列并行自回归(AR)机制——Balanced SP,通过在各计算节点上配对“干净历史”与“加噪目标”时间块,实现SP感知的分块VAE编码与自然teacher-forcing掩码;结合NVFP4低精度计算,显著降低显存占用并加速GEMM运算。推理阶段支持Blackwell架构下的W4A4 NVFP4量化、NVFP4 KV缓存及异步流式VAE解码,非Blackwell平台则采用SP推理与量化KV缓存协同优化通信开销。实验表明,该框架在保持高质量生成的同时,大幅提升长视频建模效率与端到端吞吐量。 PDF · arXiv · 代码 · 项目 | ❤️ 86 2. Code as Agent Harness Xuying Ning, Katherine Tieu, Dongqi Fu 本文提出“代码即代理框架”(Code as Agent Harness)这一新范式,将代码从传统生成目标升维为代理系统的核心基础设施,支撑推理、行动、环境建模与执行验证。作者构建三层分析框架:(1)框架接口层,刻画代码如何连接代理与外部能力;(2)框架机制层,涵盖面向长周期任务的规划、记忆、工具调用及反馈驱动的控制与优化;(3)扩展层,探讨单代理到多代理系统中共享代码构件对协同、审查与验证的支持。综述覆盖编程助手、GUI/OS自动化、具身智能、科学发现等七大应用场景,并指出评估体系、鲁棒性、可解释性等关键开放挑战。 PDF · arXiv · 代码 | ❤️ 24 3. WavFlow: Audio Generation in Waveform Space Feiyan Zhou, Luyuan Wang, Shoufa Chen...

五月 20, 2026 · 6 分钟 · Pan

AI 每日资讯 — 2026-05-19

AI 每日资讯 — 2026-05-19 🔥 HuggingFace 每日论文 1. DexJoCo: A Benchmark and Toolkit for Task-Oriented Dexterous Manipulation on MuJoCo Hanwen Wang, Weizhi Zhao, Xiangyu Wang 本文提出DexJoCo——一个面向任务的灵巧操作基准与工具包,旨在推动类人级机器人灵巧手操作能力的发展。针对现有基准缺乏对灵巧手特有操作能力(如工具使用、双手协同、长时序规划与推理)的系统性评测问题,DexJoCo构建了11个功能驱动的任务,并配套开源了基于低成本硬件采集的1.1K条高质量轨迹数据集,支持域随机化以评估策略鲁棒性。作者在视觉/动力学随机化、多任务学习与动作头适配等多种设定下对主流模型进行了全面评测,揭示了当前策略在接触建模、跨任务泛化与长程时序一致性等方面的共性局限,为灵巧手机器人学习指明了关键挑战与研究方向。 PDF · arXiv · 代码 · 项目 | ❤️ 46 2. Flash-GRPO: Efficient Alignment for Video Diffusion via One-Step Policy Optimization Xiaoxuan He, Siming Fu, Zeyue Xue 本文针对视频扩散模型与人类偏好对齐中Group Relative Policy Optimization(GRPO)计算开销巨大、训练不稳定的问题,提出单步优化框架Flash-GRPO。该方法通过等时序分组(iso-temporal grouping)消除时间步混淆方差,保障提示级时序一致性;并引入时间梯度校正(temporal gradient rectification)归一化时变梯度尺度,缓解跨时间步梯度幅值失衡。在1.3B至14B参数模型上的实验表明,Flash-GRPO在显著降低GPU天数消耗的同时,训练更稳定,且对齐质量超越全轨迹训练,达到当前最优水平。 PDF · arXiv · 代码 · 项目 | ❤️ 27...

五月 19, 2026 · 6 分钟 · Pan