夫妻户口都在女方居委会，可现在南方要迁移原来地

夫妻户口都在女方居委会，可现在南方要迁移原来地，孩子和母亲户口一起。孩子念书也在女方所在地，生活都在女方所在地，对以后有任何影响吗？男方那会因为这些牵扯到孩子吗？不想和男方家庭牵扯事因为：当时没有给我办理任何结婚，都是直接，还有老公妈妈很坏，我肚子很大了因为不承认都没有打过一次电话，孩子出生第三天，我还躺在床上就去我家闹，说了很多难听的话：说我倒贴给他家都不要。我父母是农民所以一句都不敢说。现在只好把一切都放家里,孩子一周岁了，都是我妈妈一个人带现在政策变了，老公却要吧自己的户口搬回去。可我死都不愿意，