Как в данной ситуации можно отказаться от родного отца?

Мне 24 года. С отцом стараюсь не общаться уже на протяжение 1 года,до этого несмотря на то что жили в одной кв , старалась делать вид, что его нет и своему ребенку не давала общения. Потом видя, что мой сын тянется к деду, смягчилась и разрешила им общения. Но ничего хорошего из этого не вышло. человек всегда был пьян и нес гадости маленькому ребенку про меня и мою маму.Так как он жил вместе с мамой и после их развода. но год назад устав от его пьянок и выходок мама его выгнала. Спустя год он начал угрожать маме , вытягивать из нее деньги, изводить меня(у меня ребенок уже у самой есть 4х лет), муж (он не является по документам сыну моему родным папой , но ребенок его считает и воспринимаем, как папа),начал заступаться за нас . Из-за чего отец стал угрожать , что он никого не пожалеет и всем будет плохо. Так же стал угрожать, что не даст моему мужу усыновить в будущем моего ребенка , как мой муж и хотел. Подскажите как быть? С полицией не хотелось бы связываться тк маленький ребенок и для нас важнее его спокойствие и его безопасность. Хотела юредически отказаться от собственного отца по этим причинам. и ряду других