土地纠纷我家的地出租给吴,当时出的有…

土地纠纷我家的地出租给吴,当时出的有合同,但是没有写具体大小,而吴用作建房用并且把给我临近的王的宅基地侵占,当王找吴是吴说是我家租给他使用的,可我家的地多少村委会都知道,我们在合同上也清楚的写到西至王的地界,可吴不承认,吴还是我们镇财政所的所长,他租我家的地是要建房卖给别人,公务员法规定公务员不能有第二职业,请问能告他吗,这件事怎么解决好,谢谢!