Har jag rätt att uttrycka min åsikt?

Seriöst? 
Nej det är inte upp till dig vad han gör med barnen under hans tid, så länge han tar sitt föräldraansvar. 
Det är för övrigt mycket mer värdefullt längden att bygga en relation till farföräldrar.