Château Calon Ségur verdankt seinen berühmten Beinamen einer Anekdote, die dem Marquis Nicolas-Alexandre de Ségur zugeschrieben wird, dem Eigentümer des Gutes im 18. Jahrhundert. Obwohl er auch die renommierten Château Latour und Château Margaux besaß, soll er bekannt haben: "Ich mache Wein in Latour und in Lafite, aber mein Herz ist in Calon." Als Hommage an diese Aussage ziert das Etikett von Château Calon Ségur seitdem ein rotes Herz, das zu einem der bekanntesten Symbole von Saint-Estèphe und des gesamten Médoc geworden ist.