你好,我老婆出轨,而且跟人离家出走过,就是没有现场证据,现在我也离婚,她家人要分房产,房子是结婚前我爸妈砌的,我们婚后就砌了6间平房共100平方,她爸妈现在就额我就住我家来了,撵多撵不走,我该怎么处理。