Добрый день!
Если не удается договориться с братом Вашего покойного отца полюбовно, то остается идти только в суд. Унаследовав половину дома Вашего отца, а равно и определенную долю пристроя (от 2/3 до 3/4 в зависимости от того как он был юридически оформлен), брат действительно получил возможность проживать на Вашей половине дома и, естественно, пользоваться пристроем.
Вам следует обратиться в суд с иском о выделении собственности на дом в натуре.
Вариативность искового заявления здесь зависит от Ваших финансовых возможностей.
Суть сводится к тому, готовы ли Вы выкупить у ответчика (брата) его долю на половину дома полностью или в части. Или же наоборот поставить в иске вопрос о передаче всего объекта недвижимости в собственность ответчика с одновременным взысканием с него же денежной компенсации в размере половины стоимости имущества.
Определившись с тем, какой из вариантов для Вас предпочтительный (или менее болезненный) формулируйте иск и вперед.
Есть еще вариант продажи Вашей доли третьим лицам (после того как предложите купить ее брату отца — это обязательное условие). Но вряд ли найдется много охотников купить такое имущество.
Удачи!