这房子要是已经过户给孩子且已经成年，无需男方签字，也无需再离婚协议书写这个，只需要孩子同意，你居住，就可以居住。但是就怕孩子听父亲的话，或不愿意和你一起住，那样也只有在离婚协议上写明，女方有该房屋永久居住权，要是不愿意签字，就只有走司法程序，到法院进行民事调解书，强制传召