荒い言い方の人が居るけど、恋愛感情持ってないなら離婚しても別れた妻の元には帰らないと思う。離婚しないなら妻が子供を虐待したり暴言吐いたりして、仕方なく子供を引き取るという選択もある。