W XVIII w. ówczesny właściciel Skały Adam Tarło, zbudował obok już wtedy ruin zamku, okazały pałac na planie wydłużonego prostokąta, który niestety, wkrótce spłonął. Pałac nie został nigdy odbudowany, na początku XIX w. prezentował się już jako malowni...