Уважаемая Анастасия!
Если отец ребенка вписан в свидетельство или отцовство установлено, то в соответствии с п. 3 ст. 65 СК РФ:
Место жительства детей при раздельном проживании родителей устанавливается соглашением родителей.
При отсутствии соглашения спор между родителями разрешается судом исходя из интересов детей и с учетом мнения детей. При этом суд учитывает привязанность ребенка к каждому из родителей, братьям и сестрам, возраст ребенка, нравственные и иные личные качества родителей, отношения, существующие между каждым из родителей и ребенком, возможность создания ребенку условий для воспитания и развития (род деятельности, режим работы родителей, материальное и семейное положение родителей и другое).
Таким образом, если договориться не получается, этот вопрос можно решить в суде. Суд, принимая решение, в первую очередь будет исходить из интересов ребенка, учитывать возраст ребенка, привязанность к каждому из родителей и иные заслуживающие внимание обстоятельства. В Вашем случае, вероятность того, что определят место жительства ребенка с отцом, очень низка, в силу ряда причин. Не обращайте внимания на его угрозы, не переживайте, ему это вряд ли удастся реализовать.
Если отцовство не установлено, определенные его действия по отношению к Вашему ребенку будут незаконны.
С Уважением, Надежда.