Страшно, что Вас улыбает эта ситуация.
Значит, не понимаете простых вещей в жизни.
Оставьте сына на недельку-две у себя, а в выходной отведите к маме и увидите, как ребенок к ней побежит.
Дети скучают по родителям.
Кого из родителей долго не видит, к тому и побежит.
Так что снимайте корону и попытайтесь хоть чуточку оценить то, что делает бывшая жена для вашего общего ребенка: она, в отличие от Вас, не мама-праздник, а мама 24/7. Она не только погуляет, поиграет и развлечет ребенка раз в неделю, а ежедневно заботится о нём, включая и неприятные для ребенка вещи - поругает, заставит делать то, что ему не хочется, но надо.
А Вы - воскресный папа, с Вами у сына только приятное времяпрепровождение.