老公是外地的，婚后一直在我家，因为他爸妈身体不好，现在一直说要回老家照顾他爸妈，要我跟他一起回家生活，我不会同意和他回家，我说把他爸妈接过来，他说住不习惯。不会过来的。如果我不和他回河北他说那就注定要离婚，现在宝宝在肚里都快生了，就要面对离婚吗？