現在分譲マンションに住んでいます。子どもが3人になり
手狭になったので一戸建てへの住み替えを検討しています。
現在のマンションは元値5500万、ローン残債2500万
見積もりでは5000万強で売れそうとのことでした。

私 36歳 年収1300万
妻 34歳 年収450万(フルタイムだと700万くらいには増えますが子供が小さいので)
子ども3人(小学生2人、幼稚園1人)

現在の貯蓄
●夫婦の口座預金集めて計3000万
●子ども名義口座預金 計800万
●養老保険(夫42歳満期で500万。今解約すると380万ほど)
●学資保険 18歳で各400万ずつ(解約すれば計100万強)
●その他積立型の保険(解約すれば現時点で300万)

支出
保険、生活費、学費(私立)、子どもの習い事、
それに15万円の住宅ローンで月75万円ほどかかります

現在のマンションの近くで考えているのですが
比較的都会のため地価が高く40坪でも7000万弱するようです。
子ども3人に個室をと思うと広い土地が必要ですが、
学費と習い事だけでも月30万かかっていています。

そこでご相談なんですけど
私は現在の仕事が正直あまり好きではありません。
昔からタクシーをよく利用していて運転手さんから色々話を聞き
運転も好きでタクシー運転手に憧れていて、将来は個人タクシーも夢見てます
でも今会社を退職してタクシー運転手になって一戸建てを購入したうえで
今の生活レベルを維持できるかが少しだけ不安です
しかし、頑張れば頑張っただけ稼げて、ましてや個人タクシーになれば
同じ仕事量でも実入りも増えると聞いたので
頑張るつもりなのですがご意見お願いします。