В соответствие с п.п.4) п.1 ст. 36 ЖК РФ собственникам помещений в многоквартирном доме принадлежит на праве общей долевой собственности общее имущество в многоквартирном доме, в том числе земельный участок, на котором расположен данный дом, с элементами озеленения и благоустройства, иные предназначенные для обслуживания, эксплуатации и благоустройства данного дома и расположенные на указанном земельном участке объекты.
Согласно ст. 37 ЖК РФ, доля в праве общей собственности на общее имущество в многоквартирном доме собственника помещения в этом доме пропорциональна размеру общей площади указанного помещения.
В силу ст. 44 ЖК РФ, общее собрание собственников многоквартирного дома правомочно в принятие решений о пределах использования земельного участка, на котором расположен многоквартирный дом, в том числе введение ограничений пользования им.
Таким образом, если собственники не приняли решение об ограничении Вас с мужем в пользовании земельным участком, доводы соседа необоснованны и не законны.