Ve vesnici se nacházela gotická tvrz, která zřejmě vyhořela. Na jejích základech byla počátkem 18. století vystavěna sýpka. Tento historický objekt je nyní zrekonstruován - jeho pozdně renesanční a raně barokní ráz zůstal zachován. K Pernolci náleží též poutní kostel sv. Anny Samétřetí nad vesnicí při silnici na Tachov - tento pseudorománský kostel byl na náklady Windischgrätzů vystavěn v letech 1898-1902. V roce 2007 získal Pernolec zápis do Guinessovy knihy rekordů za počet návštěvníků Pernolecké poutě na jednoho obyvatele vesnice.