Vad har jag med ensam vårdnad för rättigheter?

Hej.
Jag har ensam vårdnad om mitt 5åriga barn. Det är sagt att pappan ska ha barnet varannan helg, men pappan har svårt för att hålla det. Antingen kan han höra av sig kvällen innan han ska hämta och säga att det inte passar den helgen, eller så hör han kanske inte av sig överhuvudtaget. Så ibland kan det gå någon månad innan han har barnet, han hör dessutom i princip aldrig av sig under tiden han inte har barnet för att prata med de/höra hur de mår. Nu har han börjat bråka om julafton, i vanliga fall har han fått haft barnet första halvan av julafton men nu insisterar han på att ha barnet hela denna julafton. Vilket jag varken vill eller tycker han förtjänar, och barnet vill dessutom absolut inte vara där på julafton. 
Jag undrar om jag med ensam vårdnad bara kan bestämma rakt av att barnet blir hemma på julafton, eller om det kan bli någon slags nackdel för min del om pappan skulle gå vidare till familjerätten som han "hotar" med? 
Med tanke på hur pappan betett sig under dessa 5 år är jag inte rädd för att göra upp något i familjerätten, men jag vill ändå inte sätta krokben för mig själv genom att neka om jag inte riktigt har rätt till det.

Kan jag ringa familjerätten med dessa frågor på telefon? 

Tacksam för svar om någon har koll på sånt här!