Underhållsbidrag - kan han kräva mig på pengar??

Hej! Lång historia kort, jag och mitt ex har ett 2 årigt barn tillsammans. Han har inte viljat träffa barnet över huvud taget förrän nu, och jag gick också med på att inte begära underhållsbidrag ifrån honom. Jag har heller inte fått underhållsstöd från FK. Han fick umgänge genom tingsrätten och det funkar bra, det har pågått ett tag och han begär bara mer och mer. Han har det väldigt bra ställt ekonomiskt och inga andra barn, medans jag har det ganska tufft då jag bara har jobb på halvtid. Så jag kände att jag vill be om underhållsbidrag retroaktivt, kanske inte 2 år men några månader iallafall. Hur som helst så togs det upp och han slänger ett gammalt kontakt framför näsan på mig och påstår att han inte har någon skyldighet att betala något för det är jag som är skyldig honom pengar. För flera flera år sedan så hjälpte han mig att betala en operation. Han gjorde ett hemmagjort kontrakt på att jag skulle betala tillbaka men det blev aldrig av. Kan han använda det emot mig nu verkligen som argument till att inte betala underhållsbidrag retroaktivt? Någon som vet?