任雨山
Seventy3
73播客,名字取材于Sheldon最喜欢的数字,内容由NotebookLM生成,每天跟随AI读AI业界论文。
Where to listen?
Podcasts in the app Replaio Radio Coming soonPodcasts are coming to the app soon. Install now and be the first to see a whole new take on podcasts
Episodes
【第274期】Vision-R1 02.07.2025 16:00
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Vision-R1: Evolving Human-Free Alignment in Large Vision-Language Models via Vision-Guided Reinforcement Learning Summary 本研究提出Vision-R1,这是一种旨在通过强化学习(RL)提高多模态大型语言模型(MLLMs)推理能力的方法。文章解决了现有MLLMs在复杂推理任务中表现不佳的问题,因为它们...
【第273期】Diffusion-4K:超高分辨率图像生成 30.06.2025 11:27
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Diffusion-4K: Ultra-High-Resolution Image Synthesis with Latent Diffusion Models Summary 本论文介绍了 Diffusion-4K,这是一个旨在直接生成超高分辨率图像的新框架,解决了现有模型通常局限于较低分辨率的挑战。它通过创建名为 Aesthetic-4K 的4K图像数据集来弥补公共数据集的不足,该数据集包含...
【第272期】SimpleRL-Zoo:Zero RL推理能力 29.06.2025 11:53
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: SimpleRL-Zoo: Investigating and Taming Zero Reinforcement Learning for Open Base Models in the Wild Summary 本研究探讨了零强化学习(RL)对不同基础模型(包括Llama3-8B、Mistral-7B/24B和Qwen系列模型)推理能力的影响。研究发现,通过调整奖励和控制查询难度等策略,RL训练能显著提高模型的...
【第271期】FFN Fusion 28.06.2025 23:40
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: FFN Fusion: Rethinking Sequential Computation in Large Language Models Summary 该论文介绍了一种名为FFN Fusion的新型优化技术,旨在提高大型语言模型的推理效率。通过识别并整合变压器架构中连续的馈送网络(FFN)层,该方法将顺序计算转化为并行操作,从而显著减少推理延迟和每令牌成本。研究人...
【第270期】Bottleneck Sampling 27.06.2025 16:59
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Training-free Diffusion Acceleration with Bottleneck Sampling Summary 该文件介绍了**“瓶颈采样”,这是一种用于加速扩散模型推理的无训练框架,而不会降低生成内容的质量。文章指出,由于自注意力的二次复杂度,图像和视频生成模型(如Diffusion Transformers,DiTs)的计算成本很高,尤其是在高分...
【第269期】Video-T1:Test-Time Scaling for Video Generation 27.06.2025 15:17
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Video-T1: Test-Time Scaling for Video Generation Summary 这篇研究论文介绍了一种名为 Video-T1 的新框架,用于视频生成中的 测试时间缩放(TTS) 。该框架将视频生成重新解释为一个 搜索问题 ,旨在从高斯噪声空间中找到更好的视频轨迹,从而提高生成质量。论文探讨了两种搜索算法: 随机线性搜索...
【第268期】FAR:Next-Frame Prediction 25.06.2025 24:54
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Long-Context Autoregressive Video Modeling with Next-Frame Prediction Summary 本研究引入了帧自回归(FAR)模型,这是一种用于视频生成的强大基线,它通过建模连续帧之间的时间因果关系来改进现有方法。FAR 模型解决了训练和推理之间存在的上下文观察差异,并提出了随机干净上下文的训练策略以提...
【第267期】RoboMIND:用于机器人操作的大型、多主体、高质量数据集 24.06.2025 16:20
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: RoboMIND: Benchmark on Multi-embodiment Intelligence Normative Data for Robot Manipulation Summary 名为RoboMIND的来源文档介绍了一个用于机器人操作的大型、多主体、高质量数据集,旨在推动通用机器人模型的开发。该数据集包含107k条演示轨迹,涵盖479项不同任务和96种对象类别,并利用人类遥操...
【第266期】OLMo 2 23.06.2025 27:00
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: 2 OLMo 2 Furious Summary 这篇文档介绍了 OLMo 2 ,一种由 AllenAI 开发的开源语言模型系列。它详细阐述了 OLMo 2 相较于其前代模型的改进,包括 架构增强 、 训练稳定性提升 和 数据混合策略的优化 ,特别是引入了 Dolmino Mix 1124 以提高数学能力。文档还讨论了 后训练流程 ,例如使用 RLVR 进行指...
【第265期】ARQ: for LLM Instruction Following 22.06.2025 30:31
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Attentive Reasoning Queries: A Systematic Method for Optimizing Instruction-Following in Large Language Models Summary 这些资料介绍了一种名为注意力推理查询 (ARQs) 的新颖结构化推理方法,旨在显著提升大型语言模型 (LLMs) 在遵循指令方面的表现。通过引导 LLMs 遵循特定领域的推理蓝图和目...
【第264期】Block Diffusion Language Models 21.06.2025 21:49
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Block Diffusion: Interpolating Between Autoregressive and Diffusion Language Models Summary 这些来源介绍了一种名为块扩散语言模型(BD3-LMs)的新型人工智能模型,它结合了自回归模型和扩散模型的优点。传统扩散模型在生成任意长度文本和推理效率方面存在局限性,而自回归模型则受限于顺序生成...
【第263期】SEARCH-R1: RL for Reasoning and Search in LLMs 20.06.2025 14:24
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Search-R1: Training LLMs to Reason and Leverage Search Engines with Reinforcement Learning Summary 这篇研究文章提出了一种名为 SEARCH-R1 的新型框架,它利用强化学习让大型语言模型 (LLMs) 学习如何通过 多轮搜索查询 与搜索引擎进行自主交互。 区别于依赖固定检索或大量标注数据的现有方法,S...
【第262期】PLAN-AND-ACT:Long-Horizon Tasks Plan Agents 19.06.2025 16:01
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Plan-and-Act: Improving Planning of Agents for Long-Horizon Tasks Summary 这篇文章介绍了一个名为 PLAN-AND-ACT 的新框架,旨在提升大型语言模型 (LLMs) 在执行复杂、多步长任务时的表现。该框架通过将任务分解为 PLANNER(负责生成高层计划)和 EXECUTOR(负责将计划转化为具体操作)两个独立部...
【第261期】LMM-R1: Reasoning Enhancement for LMM 18.06.2025 16:22
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: LMM-R1: Empowering 3B LMMs with Strong Reasoning Abilities Through Two-Stage Rule-Based RL Summary 本研究提出了一个名为 LMM-R1 的框架,旨在通过一种新颖的两阶段规则奖励强化学习方法提升大型多模态模型 (LMM) 的推理能力,即使是参数量有限的小型模型也不例外。 第一阶段侧重于利用大量的文...
【第260期】Vision-R1: Reasoning in Multimodal LLM 17.06.2025 12:44
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Vision-R1: Incentivizing Reasoning Capability in Multimodal Large Language Models Summary 这篇研究探讨了如何通过强化学习(RL)增强多模态大型语言模型(MLLM)的推理能力,并提出了 Vision-R1 模型。研究首先构建了一个 高质量、无需人工标注 的多模态思维链数据集,用于对基础 MLLM 进行 冷启...
【第259期】Agentic Reward Modeling 16.06.2025 17:26
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Agentic Reward Modeling: Integrating Human Preferences with Verifiable Correctness Signals for Reliable Reward Systems Summary 这项研究提出了“代理奖励建模”,一种结合了传统基于人类偏好奖励模型和可验证正确性信号的新型奖励系统。研究人员实现了一个名为 REWARDAGENT 的奖励代理,它集成了...
【第258期】Forecasting Rare Language Model Behaviors 15.06.2025 25:58
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Forecasting Rare Language Model Behaviors Summary 这些资料提出了预测大型语言模型在大规模部署时可能出现的罕见不良行为的方法。它们解释说,标准的评估方法测试查询数量远少于实际部署中的查询数量,因此可能无法捕捉到仅在数十亿次查询中才会显现的风险。通过分析每个查询引发特定行为的**“引发...
【第257期】UPFT:The First Few Tokens Are All You Need 14.06.2025 16:24
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: The First Few Tokens Are All You Need: An Efficient and Effective Unsupervised Prefix Fine-Tuning Method for Reasoning Models Summary 本文件介绍了一种名为无监督前缀微调 (UPFT) 的新方法,旨在提高大型语言模型的推理能力。与需要大量标记数据或计算成本高昂的拒绝采样微调 (RFT) 不同,UPF...
【第256期】LightThinker: Thinking Step-by-Step Compression 13.06.2025 18:31
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: LightThinker: Thinking Step-by-Step Compression Summary 这些资源介绍了 LightThinker,这是一种通过在推理过程中动态压缩中间思考步骤来提高大型语言模型 (LLM) 效率的新方法。LightThinker 借鉴人类认知过程,将冗长的思考链压缩成紧凑的表示,从而显著减少上下文窗口中存储的 token 数量,降低内...
【第255期】用FFT替代传统自注意力机制 12.06.2025 17:04
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: SPECTRE: An FFT-Based Efficient Drop-In Replacement to Self-Attention for Long Contexts Summary 这个文本介绍了FFTNet,一种利用快速傅里叶变换(FFT)来替代传统自注意力机制的新型神经网络架构。 传统自注意力机制在处理长序列时计算复杂度高,而FFTNet通过将输入转换到频域,以O(n log n)的时...
【第254期】Thinking Faster by Drafting Less: Chain of Draft 11.06.2025 12:27
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Chain of Draft: Thinking Faster by Writing Less Summary 本来源介绍了 Chain of Draft (CoD),这是一种用于大型语言模型(LLMs)的新颖提示策略。与强调详细逐步推理的现有 Chain-of-Thought (CoT) 方法不同,CoD 鼓励 LLMs 生成简洁、信息密集型的中间草稿。研究表明,通过减少冗长,CoD 在保持或...
【第253期】SECOND ME:AI-Native Memory Management 10.06.2025 14:58
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: AI-native Memory 2.0: Second Me Summary 这些来源描述了一种名为SECOND ME的AI系统,它旨在作为用户的智能、持久的外部记忆系统。通过利用大型语言模型 (LLMs),SECOND ME能够超越传统的存储解决方案,实现对用户特定知识的结构化组织、上下文推理和自适应检索。该系统充当用户与外部世界(包括其他A...
【第252期】Inductive Moment Matching for Generative Modeling 09.06.2025 26:49
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: Inductive Moment Matching Summary 这篇研究提出了一种名为 归纳矩匹配(IMM) 的新型生成模型框架,旨在解决现有扩散模型和流匹配方法在推理速度和训练稳定性之间的权衡。与需要预训练模型的蒸馏技术不同,IMM 采用 单阶段训练过程,能够直接从头开始学习用于单步或少数步采样的模型。通过利用 自洽...
【第251期】YOLOE:Real-Time Seeing Anything with Open Prompts 08.06.2025 14:49
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: YOLOE: Real-Time Seeing Anything Summary 这个文档介绍了一个名为YOLOE的新型实时目标检测和分割模型。 YOLOE 能够在一个高效的框架内处理 文本、视觉 和 无提示 等多种开放式提示机制,实现“实时感知一切”。为了实现这一目标,论文提出了**可重参数化区域-文本对齐(RepRTA) 策略来优化文本提示处...
【第250期】EasyControl:效率和灵活性指导的条件图像生成 07.06.2025 23:08
Seventy3:借助NotebookLM的能力进行论文解读,专注人工智能、大模型、机器人算法方向,让大家跟着AI一起进步。 今天的主题是: EasyControl: Adding Efficient and Flexible Control for Diffusion Transformer Summary 这份技术论文介绍了EasyControl,一个旨在提高扩散变换器(DiT)架构在条件图像生成方面的效率和灵活性的新框架。研究人员通过引入一个轻量级的条件注入LoRA模块来处理条件信号,确保与现有模型兼容并支持多条...
Similar podcasts
Replaio is not a podcast publisher; show names, artwork and audio belong to their authors and are distributed through public RSS feeds.