droit au supplément familial.- rémunération

Bonjour je suis titulaire de la fonction publique et ma conjointe également. Nous formons une famille recomposée. Ma conjointe a un enfant pour lequel elle touche le supplément familial. J’ai également un enfant pour lequel je touche le supplément familial. Nous avons souhaité d’un commun accord que je touche le complément familial pour nos deux enfants et mon employeur me refuse cette éventualité sans plus d’explications , me disant que ce n’est pas possible car c’est ma conjointe qui est allocataire des allocations familiales. Nous sommes bien déclarés ensemble au niveau de la CAF, venons de nous PACSER, et allons faire une déclaration d’impôt en commun. Merci pour votre réponse.