Kostol Všetkých svätých v Kacvíne má prekvapivú, netypickú architektúru. Strecha kostola je pokrytá šindľom, na štíte ktorej sa vyníma sanktusník s cibuľovitou strechou, ktorý priťahuje pozornosť svojím subtílnym tvarom a koloritom. V interiéri je hodný pozornosti hlavný oltár, s obrazom Svätých víťaznej cirkvi, ktorý nadväzuje do obdobia protireformačných bojov na Spiši. V 18. storočí bol Kacvín miestom silného kultu sv. Anny, ktoré sa nakoniec prejavilo tým, že bola ku kostolu pristavaná kaplnka a založené bolo Bratstvo sv. Anny.