Как быть, если бывший начальник требует вернуть деньги за отработанные дни и угрожает?

Добрый день, меня зовут Андрей, 38 лет, живу в Южно-Сахалинске. В конце января т.г. я устроился на работу продавцом-консультантом по сантехнике. Отработал 2 дня, сославшись на трудное финансовое положение, спросил у начальника всего 80(восемьдесят) рублей на проезд, он же дал мне 3000(три тысячи), сказал, что понимает мою ситуацию. После этого я отработал ещё один день, к вечеру мне стало плохо, но я этого не показывал, ночью была температура. Начальник на этот момент был в командировке в Европе. Утром я отправил смс его отцу, владельцу бизнеса, что я не смогу выйти, заболел. На работу я так и не вышел, был тяжелый грипп. Начальник прилетел из командировки и написал мне смс, что если я не верну ему деньги, буду пенять на себя, читалось, как угроза. А какие деньги я ему должен, если я честно отработал 3 полных дня? Официально оформлен я не был, помогите, что мне делать? Спасибо.