Kościół w Skarpie to dawna przypałacowa kaplica zbudowana przez Prądzyńskich w 1930 r. Zachowały się wspomnienia o osobach, które w czasie przechodzącego frontu II wojny światowej ukrywały się w podziemnej części kaplicy. Jeden z witraży ma także według przekazów nosić ślady kuli.
W 2009 r. w ścianie kaplicy została złożona urna z prochami Andrzeja Aubrachta Prądzyńskiego (syna Lucjana). Jego pogrzeb był ważnym wydarzeniem, w którego przygotowanie włączyła się lokalna społeczność. Jako oficer 16. Pułku Ułanów Andrzej Prądzyński był chowany z honorami, w obecności sztandarów oraz konia bez jeźdźca z oficerkami ustawionymi w odwrotnym kierunku w strzemionach.
