孩子应该不是前夫的，所以前夫要回房子是合理的，这也是维护自身权益的正常做法。