3-4 Stunden pendeln ist echt hart, auch die anvisierten 1-2 fände ich persönlich schon viel.
Solltest du nicht nur allein bauen, sondern auch allein wohnen, würde ich raten eine Mietwohnung direkt in der nähe der Arbeit zu nehmen und das bisherige Haus als Wochenresidenz nutzen.