マイホーム購入はまだ先にしたほうがいい？

今家賃86,000円、管理費8,000円、駐車場代10,000の賃貸に住んで3年目です。
毎月104,000円ですが、家賃補助が27,000円あるので実質77,000円です。

貯金は300万、2人合わせた世帯年収は約1000万です。
小さい子供が1人で、5年後くらいに2人目希望。
2人とも30歳です。
借入は、車のローンが残り50万と2人の奨学金が合わせて残り200万。
（借入はとても安い金利なので繰上げ返済は絶対にする予定はありません）

購入を検討している理由として、周りがどんどん購入しているのでそろそろうちも？っていうのと、家賃を払うならローンに充てほうがいい？っていうのと、35年ローンだとあまり遅くにくむと返済が厳しくなるかもと思っているからです。

ですが、貯金が少ないのと、だいたいこの辺りの住宅だと安くても3500万程なのでこの年収で3500万のローンを組むのに不安があります。

マイホームは羨ましいですが周りがなんでポンポン家を購入してるか謎でしかありません。
もっと慎重になって頭金貯めてから40歳くらいで購入の方が現実的ですよね？

無理してローンくんでローン地獄になってる人いますか？