Първата крепост в Огродзенец е построена още през 12 век, но формата на замъка, възхищавана от туристите днес, е резултат от реставрация, спонсорирана от кастелана от Краков Станислав Варшицки, най-известният собственик на замъка. Въпреки това той е запомнен най-вече не само с богатството и възстановяването на разрушения замък, но и с алчността и жестокостта си. В народните устни предания се споменава кастеланът, който бил толкова алчен, че преди смъртта си скрил всички богатства, за да не получат нищо наследниците му. Неговите богатства не са открити до наши дни и се смята, че призракът на кастелана, приемащ поглед на голямо черно куче с пламтящи очи, пази съкровището.
