TY - RPRT TI - The Future of Large Language Model Pre-training is Federated AU - Lorenzo Sani AU - Alex Iacob AU - Zeyu Cao AU - Bill Marino AU - Yan Gao AU - Tomas Paulik AU - Wanru Zhao AU - William F. Shen AU - Preslav Aleksandrov AU - Xinchi Qiu AU - Nicholas D. Lane PY - 2024 UR - https://arxiv.org/abs/2405.10853 ID - 2405.10853 ER -