不讓建,說我家的二樓的門對著他的院子,不讓我們蓋, 我到底有沒有侵害到他的權利?

就以前的老問題，在10年前父母蓋我們現住的著房的時候，鄰居家的父親就多次到我家蓄意擣亂，經多方調節才平息，我們在住房的西麪畱有50公分的滴水，他現在沒有按這個尺寸畱我是不是有權讓他恢複，

我們現在要再小院裡建一樓梯，上下樓， 其夫婦多次到我家擣亂，不讓建，說我家的二樓的門對著他的院子，不讓我們蓋， 我到底有沒有侵害到他的權利

如房子蓋好了，現實中就很難在改變。