TY  - RPRT
TI  - Not All Preferences Deserve Gradients: Understanding Gradient Utility in Offline Reasoning Alignment
AU  - Hui Wu
AU  - Hengyi Cai
AU  - Jinman Zhao
AU  - Xinran Chen
AU  - Ziheng Li
AU  - Zhejun Zhao
AU  - Shuaiqiang Wang
AU  - Yuchen Li
AU  - Dawei Yin
PY  - 2026
UR  - https://arxiv.org/abs/2602.01207
ID  - 2602.01207
ER  -