Après la division du domaine du Comte de Provence, l’actuel centre ville se trouve paradoxalement inoccupé. La bourgeoisie et la noblesse d’Empire empruntent, dans un premier temps, les bâtiments laissés intacts par la Révolution. Sous la Restauration, une nouvelle vague de constructions fait naître des propriétés encore largement inspirées des folies du XVIIIème siècle. Enfin, la mise en service du chemin de fer, au milieu du XIXème siècle, conduit à l’apparition des grandes demeures du centre ville. Puis, le doublement de la voie de chemin de fer conduit une population plus modeste vers Brunoy. Le début du XXème siècle connaît le développement des programmes de lotissement. Peu à peu les quartiers se développent vers le nord et vers le sud. Les pavillons de brique, de meulière avec leurs jardinets et leurs décors de bois ou de céramique occupent les anciens champs et parfois les anciens jardins des grandes demeures du XIXème siècle. Un nouveau paysage se dessine. La lecture du plan actuel de la ville reflète parfaitement l’évolution du tissu urbain depuis le XVIIIème siècle. Contrairement à d’autres villes de la banlieue parisienne où le pavillonnaire du début du siècle a fait place aux grands ensembles, Brunoy a conservé, dans la majorité de ses quartiers, cette implantation d’origine.