TY - RPRT TI - Stable Preference Optimization: A Bilevel Approach to Catastrophic Preference Shift AU - Chengtao Jian AU - Kai Yang AU - Tianhao Gao AU - Wuguang Ni AU - Keying Yang AU - Bowen Xiao AU - Jiajun Liu AU - Ye Ouyang PY - 2025 UR - https://arxiv.org/abs/2507.07723 ID - 2507.07723 ER -