离婚协议上写的房子归我孩子也归我房贷一直我来还款，这房子还跟他说的着吗？是不是没关系了吧。