På det gamle torv står en statue af Esbern Snare, Kalundborgs grundlægger og repræsentant for Hvideslægten, der i 1100- og 1200-tallet havde magten i Danmark. Sammen med sin bror Absalon og deres fætter Sune Ebbesen kæmpede han på samme side som Valdemar den Store i slaget på Grathe Hede i 1157. Slaget blev vundet af Valdemars hær, og det blev afslutningen på den langvarige borgerkrig om kongemagten.