我和现在的男人没结婚,但是有一个2岁半的孩子,还各自出一半的钱买了一套房子,现在要分开,在上次闹矛盾的时候他自己写了一份协议双方都签字按手印的,说他啥都不要房子和孩子都给我,现在他要我重新来分配房子,我该怎么办。