Как матери урегулировать вопрос встреч с ребенком, который живет у свекрови и бывшего мужа?

Здравствуйте!Больше года назад мы с мужем развелись.У нас есть сын,4 годика.Так как я сирота после развода не с кем было оставить ребенка,так как вышла на работу,пришлось отвезти сынишку к свекрови,но договаривались что на выходную неделю я буду его забирать.И вот спустя полтора года я ребенка вижу несколько часов в неделю.Сына мне не дают,муж категорически против что б я его забирала на выходные.Я очень хочу проводить больше времени с ребенком но как только я завожу речь о том что б его взять к себе все заканчивается скандалом и угрозами что я его больше не увижу.Я уже устала от этой ситуации,хочу подать в суд,но боюсь что шансов у меня мало.подскажите пожалуйста как быть