Grâce à l'environnement naturel favorable de la ville, Stolac et ses environs sont habités depuis l'Antiquité. Ses riches terrains de chasse, ainsi que d'autres atouts naturels, ont attiré l'homme préhistorique, puis les Illyriens, les Romains et les Slaves, qui ont tous laissé de nombreux témoignages anthropologiques. La région est habitée depuis au moins 15 000 ans, comme en témoignent les inscriptions dans la grotte de Badanj, datées par les experts entre 12 000 et 16 000 av. J.-C. À trois kilomètres à l'ouest de Stolac se trouve une impressionnante nécropole stećak datant des XVe et XVIe siècles : Radimlja. Ces pierres tombales stećak sont gravées d'épitaphes, de portraits détaillés des défunts et de motifs tels que des vignes, des scènes de chasse et des animaux sauvages. Cinq des pierres tombales de Radimlja marqueraient les tombes de membres de la famille valaque Hrabren Miloradović. Ali-paša Rizvanbegović (1783-1851), dirigeant semi-indépendant (vizir) de l'Herzégovine ottomane de 1833 à 1851, est né dans le quartier Begovina de Stolac.