Pierwszy kościół w Woliborzu wzmiankowany już był w 1384 roku. Obecna świątynia św. Jakuba stanęła tu około 1770 roku. Jest to budowla barokowo-klasycystyczna, a wyposażenie pochodzi głównie z XVIII wieku.
W kościele św. Jakuba w Woliborzu na uwagę zasługuje ambona w formie łodzi, umieszczona po prawej stronie nawy - jedno z nielicznych dzieł tego typu w kraju. Ciekawy jest również architektoniczny ołtarz główny z belkowaniem wspieranym przez dwie pary kolumn korynckich.
W sąsiedztwie kościoła widoczna jest dawna plebania, barokowy budynek z 1772 roku, do którego wejście prowadzi przez skromny portal.