FPの回答へコメント

購入希望価格は土地と住宅建築費用、諸費用合わせ3500万
自己資金は500万。
私：24歳（会社員）総支給年収280万円
夫：31歳（会社員）総支給年収550万円

約3000万円のローンになりますが、夫：31歳なので不可能な計画ではありません。
ポイントは子供2人を私立大学までということです。

・私の収入は含まず夫のみの収入で考えて、住宅ローン返済、家族4人で生活して行く事は可能でしょうか？

逆に、住宅ローンを組んで今後の生活に支障がない生涯生活プランを作成することです。
要は家族4人で生活していけるよう計画をつくることです。
ＦＰ知恵の木では「未来設計書」と呼んでいます。
こちらのホームページに掲載されていますので、ご参考にしてください。
http://www.chienoki.com/goods01.php