Есть ли шанс лишить его родительских прав?

Здравствуйте, хочу проконсультироваться по такому вопросу. Развелась с мужем в 2017 году , нашему совместному ребенку было 3 года ,последний раз он его поздравил с днём рождением и 6 лет не присутствовал в его жизни совсем, алименты платит своевременно . У ребёнка есть отчим воспитывает его как своего сына. Бывший муж захотел увидеть ребёнка ,говорит если не дам будет подавать в суд. Есть ли шанс лишить его родительских прав? Заранее спасибо за ответ