Prima cetate din Ogrodzieniec a fost construită încă din secolul al XII-lea, cu toate acestea, forma castelului admirată de turiști astăzi este rezultatul restaurării sponsorizate de castelanul din Cracovia Stanisław Warszycki, cel mai faimos proprietar al castelului. Cu toate acestea, el este cel mai bine amintit nu numai pentru bogăția și restaurarea castelului deteriorat, ci și pentru lăcomia și cruzimea sa. Tradițiile orale populare menționează castelanul, care era atât de lacom, încât înainte de moartea sa a ascuns toate bogățiile, astfel încât moștenitorii săi să nu obțină nimic. Bogățiile sale nu au fost găsite până în prezent și se crede că fantoma castelanului, asumând aspectul unui câine negru mare cu ochi aprinși, păzește comoara.
