W Karkonoszach jest mniej więcej 150 grup skalnych. Pielgrzymy są jednak jedną z największych grup – składają się z trzech dużych i kilku mniejszych skałek. Wysokość trzech głównych to mniej więcej 25 metrów. Cała grupa położona jest na wysokości mniej więcej 1200 m n.p.m., na zboczu Smogorni, w pobliżu Wielkiego Stawu, Słonecznika, Karpacza i Borowic.
Do Pielgrzymów dojdziemy z Karpacza (szlakiem niebieskim z Białego Jaru, przez Kościół Wang, na Polanę, a dalej żółtym na Słonecznik – ewentualnie szybszą trasą szlakiem zielonym) ewentualnie z Borowic (szlakiem żółtym – około dwóch godzin).