离婚后女方总是住在男方家？这样合法吗？由女方抚养的女儿目前是住在男方家，所以女方就可以住？？外人也总说这样子好奇怪！！