我是农村的，我家胡同里住看6户人家，我住在最里面(靠村边)，我当时盖房走路是从胡同口一直买到我门前的4米宽路，我房前和别人对换了一片闲地种菜，由于在住在最里面是村边处于安全.防盗目的，从我门口往里上了个栅栏，可是外边紧靠我家邻居不让上，原因是当初建房买路时口头协议:如有人去我家房为建房充许建房走路并掏钱买路，价钱随行就市如3至5年没人建房买路，因为住在最村边为了安全.防盗可以上栅栏堵路了，我邻居说我门前有往我房后种地的小路，我找了我胡同里其他4户人家可以作证，证明我胡同里没有种地小路，小路在我胡同前一个胡同，现在我上了栅栏邻居却用砖把门前路给堵了，并手拿长柄斧头到我家恐吓威胁，扬言撇死我全家并在胡同打了我爱人，我报警后派出所到现场并没有拘捕他而是询问原因，我家按有监控我就把当时过程让派出所民警看了，拖了1个星期最后派出所结合村委，给了我1个结论就是让邻居把堵我门前的砖去掉，前题是我必须去掉栅栏，这个结果我想不通为什么在我自己的所有权范围内不能上栅栏，而占不着他一分一毫他来干涉我，请问王律师我该怎么办…