Как мне побыстрее лишить его родительских прав

Здравствуйте. 

Порядок для всех один, и он не быстрый. Лишение родительских прав производится только в судебном порядке — ст. 70 Семейного кодекса РФ. 

То есть вы должны обратиться в суд с иском к бывшему мужу о лишении родительских прав. 

Одного его согласия на это будет мало, суд также будет устанавливать имеются ли на это основания, которые предусмотрены ст. 69 СК РФ: «Родители (один из них) могут быть лишены родительских прав, если они: уклоняются от выполнения обязанностей родителей, в том числе при злостном уклонении от уплаты алиментов; злоупотребляют своими родительскими правами; жестоко обращаются с детьми, в том числе осуществляют физическое или психическое насилие над ними, покушаются на их половую неприкосновенность; являются больными хроническим алкоголизмом или наркоманией; совершили умышленное преступление против жизни или здоровья своих детей, другого родителя детей, супруга, в том числе не являющегося родителем детей, либо против жизни или здоровья иного члена семьи».

Надеюсь, мой ответ был полезен.