胡钦哲

关于我

我是上海交通大学计算机科学与技术专业的大四本科生(ACM 班致远学院),目前在威斯康星大学麦迪逊分校 HuLab 做研究实习,导师是 Junjie Hu 教授。在交大,我在先进网络实验室由刘生钟教授和吴帆教授指导;此前我曾在 Audiocc 实习,由李晨达教授和钱彦旻教授指导。朋友们叫我 Hugo。

我的研究围绕大语言模型的测试时计算高效推理:基于强化学习的后训练、推理时的推理过程控制、测试时训练与自适应。更长远地,我希望理解能带来高效、可泛化智能的计算与推断原理,并把它们推广到多种模态。

我计划申请 2027 年秋季入学的博士项目

研究方向

  • 测试时计算与测试时训练
  • 大模型的高效推理与基于强化学习的后训练
  • 基于快权重记忆的长上下文建模

动态

论文 完整列表 →

Universal Test-Time Training 架构图:展开的 uTTT 块,以及跨块共享的快权重专家池(uTTT-MoE)或共享稠密快权重算子(uTTT-Dense)。

Universal Test-Time Training

Qinzhe Hu*,Zefan Cai*,Ziqiao Ma,Hao Tan,Junjie Hu
* 共同第一作者
COLM 2026 Efficient Reasoning Workshop SpotlightNeurIPS 2026 审稿中

把测试时训练的快权重在整个网络深度上共享,而不是每层各存一份私有状态;模型因此成为一个跨(块,层)的单一递归,并在相同状态规模下提升长上下文检索能力。

TF-MoE 总览:梅尔子带切分的 Conformer 骨干、交替的频率维与时间维 MoE Conformer 块,以及带时间/子带路由器的稀疏 MoE 前馈模块。

TF-MoE: Time-Frequency Mixture-of-Experts for Efficient Speech Separation

Qinzhe Hu,Chenda Li,Wangyou Zhang,Shujie Liu,Yan Lu,Yanmin Qian
INTERSPEECH 2026 Oral

在时间帧和梅尔频带两个维度上稀疏路由专家的混合专家框架,在几乎不增加推理开销的前提下提升语音分离模型的容量(Libri2Mix 上以相近的 4.1 GMACs/s 超过 BSRNN 3.8 dB SDR)。

SmartThinker 优势计算流程:轨迹采样、按估计的最优长度计算长度奖励,以及不惩罚正确轨迹的动态奖励系数。

SmartThinker: Progressive Chain-of-Thought Length Calibration for Efficient Large Language Model Reasoning

Chenzhi Hu,Qinzhe Hu,Yuhang Xu,Junyi Chen,Ruijie Wang,Shengzhong Liu,Jianxin Li,Fan Wu,Guihai Chen
ICML 2026

基于 GRPO 的高效推理方法,通过渐进式思维链长度校准为每道题估计最优推理长度并动态调整长度奖励系数,在 AIME25 等基准上最多减少 52% 推理 token 的同时提升准确率。

研究经历

  • 研究实习生,导师 Junjie Hu 教授

    基于 LaCT 式快权重记忆的测试时训练与高效长上下文建模,通过共享状态、稀疏路由和自适应更新让测试时记忆更可扩展。

  • 上海交通大学 先进网络实验室2025 年 8 月至今
    研究实习生,导师刘生钟教授、吴帆教授

    面向高效大模型推理的强化学习与后训练,包括思维链压缩和在线策略蒸馏。

  • 上海交通大学 Audiocc 实验室2024 年 10 月至 2026 年 6 月
    研究实习生,导师李晨达钱彦旻教授

    通过在时间帧和梅尔频带上稀疏路由的混合专家,在不缩减容量的前提下降低语音分离模型的运行成本。

教育经历

荣誉

最近的笔记

课程笔记与研究笔记,中文写作。

全部文章 →