1,你们之间的纠纷属于相邻关系纠纷;
2,住宅旁盖了祠堂,严重影响家人生活,对你造成侵害;
3,根据《民法通则》第83条规定,不动产的相邻各方,应当按照有利生产、方便生活、团结互助、公平合理的精神,正确处理截水、排水、通行、通风、采光等方面的相邻关系。给相邻方造成妨碍或者损失的,应当停止侵害,排除妨碍,赔偿损失;
4,所以,作为隔壁的业主,应当本着方便生活、团结互助、公平合理的精神,争取处理相邻关系,现在盖了祠堂,严重影响家人生活,造成你受到损失,显然侵犯了你的相邻权;
5,你有权要求隔壁业主给你排除妨碍,造成损失的,赔偿损失;
6,你方如果祠堂,属于侵权,对方有权要求你方赔偿损失。