Förhindra honom som vårdnadshavare

Kan jag som ensam vårdnadshavare förhindra att barnen hamnar hos sin oengagerade biologiska pappa om det skulle hända mig något dvs skriva någon typ av testamente på att han inte ska tillfrågas utan att frågan ska gå till två andra??