TY - RPRT TI - Sonar-MoE: In-Backward Expert Updates for Memory-Efficient Mixture-of-Experts Training AU - Avni Mittal AU - Avinash Anand AU - Ashutosh Kumar AU - Dikshant Kukreja AU - Kritarth Prasad AU - Chaitanya Lakhchaura AU - Rishitej Reddy Vyalla AU - Erik Cambria AU - Zhengkui Wang AU - Rajiv Ratn Shah PY - 2026 UR - https://arxiv.org/abs/2611.03577 ID - 2611.03577 ER -