本人于2003年4月份与郭某签定房屋买卖协议，对方先付20万定金，合同约定3年后成交。2006年4月份，3年期满后，对方以种种理由刁难我方，以达到不履行合同的目的，我方在答应他所有条件的情况下，郭某居然还是不履行合同，并要求我方返还定金。我方在询问律师跟法官(所有资料均给法官与律师看过)后明确告知对方违约，违约金不用返还。并告知郭某如有异议，可去法院告，我们一切服从法院判决。我们从人性化的角度考虑，这20万也不会一分不还，当时答应郭某在该房屋卖掉以后，合理的补偿给郭某一部分钱(扣除因为对方违约造成的我方经济损失)但是在2006年5月份的时候，郭某自知到法院去解决拿不回定金的情况下，叫社会上的人来恐吓我们要钱，后来因为我方报警，对方才没有进一步的举动，该事件在派出所应留有存档。今年2月份，郭某又叫社会上的人来威胁我们，要我们马上还钱，来人自称是郭某的堂弟，是受郭某的委托前来要钱的谈话的时候，对方经常说一些威胁的话语，当我打电话询问郭某是否委托别人来要钱时，郭某承认此事，并扬言如果我不还钱