Какие мои возможные действия, чтоб этого не произошло?

Лишение родительских прав возможно только в судебном порядке (п. 1 ст. 70 СК РФ).Лишение родительских прав является крайней мерой и допускается только в случае, если защитить интересы ребенка другим способом невозможно. Основаниями для лишения родительских прав могут быть факт наличия задолженности  выплачиваемых алиментных платежей  во связи с другими проявлениями виновного поведения родителя, такими как, злоупотребление своими родительскими правами, то есть использование их в ущерб интересам ребенка(например, препятствуют его обучению, склоняют к попрошайничеству, воровству, проституции, употреблению спиртных напитков, наркотиков); жестокое обращение с ребенком; больны хроническим алкоголизмом или наркоманией, при этом данный факт должен быть подтвержден соответствующими медицинскими документами; совершение умышленного преступления против жизни или здоровья своих детей, другого родителя детей, супруга.По другим основаниям лишить родительских прав нельзя.

Лишение родительских прав возможно только по основаниям, указанным в ст. 69 Семейного кодекса РФ.

Отсутствие общения с ребенком со стороны отца, проживающего отдельно, к такому основанию не относится.

Одним из оснований для лишения прав является факт неоднократного уклонения от уплаты алиментов, содержащий признаки уголовно наказуемого деяния по ст. 157 УК РФ. 

Согласно Примечанию № 1 к ст. 157 УК РФ

неуплатой родителем без уважительных причин в нарушение решения суда или нотариально удостоверенного соглашения средств на содержание несовершеннолетних детей, а равно нетрудоспособных детей, достигших восемнадцатилетнего возраста, если это деяние совершено неоднократно, признается неуплата родителем без уважительных причин в нарушение решения суда или нотариально удостоверенного соглашения средств на содержание несовершеннолетних детей, а равно нетрудоспособных детей, достигших восемнадцатилетнего возраста, подвергнутым административному наказанию за аналогичное деяние, в период, когда лицо считается подвергнутым административному наказанию.

Просто факт наличия задолженности по алиментам не является основанием для лишения родительских прав.

Согласно ч. 1 ст. 66 СК РФ 

Родитель, проживающий отдельно от ребенка, имеет права на общение с ребенком, участие в его воспитании и решение вопросов получения ребенком образования.

Т.е. общение с ребенком является правом родителя, проживающего отдельно, а не обязанностью.