W powstałej w XVII wieku w cieniu Wielkiej Raczy Radeczce, późniejszej Rycerce Górnej, parafianie uczęszczali na nabożeństwa do kościoła w odległej o 12 km. Rajczy, ponieważ na miejscu znajdowała się jedynie niepozorna kapliczka. W 1908r. w jej sąsiedztwie mieszkańcy podjęli budowę kościoła filialnego. Kościół poświęcony został w 1911r.i nadano mu wezwanie Matki Boskiej Nieustającej Pomocy. Przez blisko 40 lat na nabożeństwa dojeżdżali księża z Rajczy.
W 1950r. dekretem kardynała Adama Stefana Sapiehy utworzono parafię i podniesiono go do rangi kościoła parafialnego. Natomiast zabytkowa kapliczka przetrwała do początków XX wieku, a obecnie w jej miejsce wykonano, w stylu góralskim, kaplicę z ołtarzem polowym. Wokół kościoła jest ciekawa, zbudowana z rzeźbionych kamieni droga krzyżowa.