Незаконный штраф

Здравствуйте,у меня проблема.Арендовал квартиру на сутки,составили договор,предоплату внес 500 рублей и при заселении 3000 рублей,как и положено.Когда договаривались,спрашивали сколько человек будет ночевать,на что я им ответил,что четверо.Еще арендодатель уточнил,что желательно не шуметь после 11 часов вечера.Вечером я пригласил несколько друзей,но ночевать хотело как раз четверо.И буквально через час заваливается арендодатель,всех выгоняет,говорит,что шум был и ему уже соседи снизу позвонили,хотя времени было только 19:00,сказал мне,что за превышение лимита людей я ему должен штраф в размере 5000 рублей,иначе соседи будут писать заявление,после чего он и меня выгнал из квартиры.В договоре ничего не сказано про штрафы,только если курить в квартире,и про лимит людей тоже.Подскажите пожалуйста,нужно ли мне платить эти деньги?