Chlumec liegt am südlichen Rand des Osterzgebirges, wo sich der Chlumecký potok durch das Gelände schlängelt. Der Ort grenzt im Westen an Stradov und Přestanov, im Süden an Chabařovice und Český Újezd sowie im Nordosten an Žandov. Sein Hausberg ist der Horka, auch Kapellenberg genannt, der sich am nordöstlichen Ortsrand erhebt. Die Fernstraße von Teplice nach Děčín führt durch Chlumec, während die Autobahn D 8 südlich in Richtung Prag verläuft.
Erstmals erwähnt wurde Chlumec im Jahr als Zollstelle zusammen mit Ústí nad Labem. Im Mittelalter kreuzten sich hier wichtige Handelswege wie die Lausitzer Straße und der Sorbenweg, bis die Wegeführung sich änderte und Chlumec seine Zollfunktion verlor. Im Besitz wechselten sich Adelsfamilien wie die Kölbel, Kolowrat und Thun und Hohenstein ab, die das Schloss prägten. Nach Zerstörungen im 19. Jahrhundert und im Zweiten Weltkrieg blieb der Ort ein Ort der Erinnerung an Schlachten, darunter die von 1040, 1126 und 1813.
Heute ist Chlumec vor allem für seine historischen Bauwerke bekannt, darunter die Kapelle der Heiligen Dreifaltigkeit auf dem Horka mit der Gruft der Familie von Westphalen-Fürstenberg. Die St.-Gallus-Kirche und das Jubiläumsdenkmal erinnern an vergangene Schlachten. Jährlich findet das Historienspektakel zur Schlacht von 1040 statt, ebenso wie das Folk- und Country-Musikfestival Chlumecký guláš. Die umliegenden Tagebaulandschaften und der Sportflugplatz prägen das Bild der Region.