Obec Kamenná Lhota leží v kraji Vysočina v ORP Světlá nad Sázav v nadmořské výšce 502 m. V roce 2014 zde žilo 253 obyvatel. Kamenná Lhota má katastrální území o rozloze 598 ha.