John-Lewis Brown (1769-1851) acquistò la tenuta all'inizio del XIX secolo e decise di costruire nel villaggio di Cantenac, un castello in stile Tudor che ricorda le sue origini scozzesi. L'edificio è uno dei più insoliti del Médoc ed è circondato da un notevole terreno in stile inglese.
La qualità del vino è stata riconosciuta nella classificazione del 1855, quando Château Cantenac Brown è stato incluso nelle crescite. L'enologo di Bordeaux, proprietario di diverse tenute nel Médoc, Louis Armande Lalande (1820-1894), ampliò l'edificio mantenendo la stessa architettura.