Wenn ich die Frage richtig verstehe, dann gibts dabei kein (Zeit-)Problem. Bereits aufgestiegene Häuser fallen nicht durch das Abreißen anderer Häuser in niedrigere Zivilisationsstufen zurück.
Und wenn ich da auf dem Holzweg bin, ignorier das einfach (und stell vielleicht die Frage anders).