夫が余ったお金を子供へ使う事なく、家族旅行や自分のレジャーに使ってしまう。こんな理由で離婚を考えるのは安易でしょうか？