В Вецпилсе (раньше Альтенбург) находится третий старейший католический приход в Нижней Курземе. Церковь в 1700 году построил владелец Вецпилсской и Илмайской усадеб Отто Эрнест фон Раппе.
Церковь построена из валунов, с черепичной крышей и одной башней. Сводчатые потолки возведены из неструганных досок, а пол – из пластин из обоженной глины.
В церкви – три алтаря, построенные в разные времена. Их украшают образа и резьба по дереву. Резьбой по дереву также украшен орган и сиденья для господ.
Под большим алтарем находится ниша для погребения членов семьи фон Раппе. Во время ремонта церкви в 1831 году барон Роэнье приказал замуровать вход в погреб.