Что делать если твоей собственностью пользуются родственники бывшей жены и не хотят её отдавать и на моем участке поставили незаконно баню

Кроме как в суд по месту нахождения участка  вам некуда обращаться. 

Статья 304. Защита прав собственника от нарушений, не связанных с лишением владения

Собственник может требовать устранения всяких нарушений его права, хотя бы эти нарушения и не были соединены с лишением владения.

Статья 209. Содержание права собственности

1. Собственнику принадлежат права владения, пользования и распоряжения своим имуществом.
2. Собственник вправе по своему усмотрению совершать в отношении принадлежащего ему имущества любые действия, не противоречащие закону и иным правовым актам и не нарушающие права и охраняемые законом интересы других лиц,