現在分譲マンションに住んでいます。子どもが３人になり
手狭になったので一戸建てへの住み替えを検討しています。
現在のマンションは元値5500万、ローン残債2500万
見積もりでは5000万強で売れそうとのことでした。

私 36歳 年収1300万
妻 34歳 年収450万（フルタイムだと700万くらいには増えますが子供が小さいので）
子ども３人（小学生２人、幼稚園1人）

現在の貯蓄
●夫婦の口座預金集めて計3000万
●子ども名義口座預金 計800万
●養老保険（夫42歳満期で500万。今解約すると380万ほど）
●学資保険 18歳で各400万ずつ（解約すれば計100万強）
●その他積立型の保険（解約すれば現時点で300万）

支出
保険、生活費、学費（私立）、子どもの習い事、
それに15万円の住宅ローンで月75万円ほどかかります

現在のマンションの近くで考えているのですが
比較的都会のため地価が高く40坪でも7000万弱するようです。
子ども3人に個室をと思うと広い土地が必要ですが、
学費と習い事だけでも月30万かかっていています。

そこでご相談なんですけど
私は現在の仕事が正直あまり好きではありません。
昔からタクシーをよく利用していて運転手さんから色々話を聞き
運転も好きでタクシー運転手に憧れていて、将来は個人タクシーも夢見てます
でも今会社を退職してタクシー運転手になって一戸建てを購入したうえで
今の生活レベルを維持できるかが少しだけ不安です
しかし、頑張れば頑張っただけ稼げて、ましてや個人タクシーになれば
同じ仕事量でも実入りも増えると聞いたので
頑張るつもりなのですがご意見お願いします。