清乾隆九年(1744年)擴大規模增建，至嘉慶二十年(1815年)，當時鹿港八郊利用重修天后宮的餘資重修威靈廟。於光緒17年(西元1891年)再次重修，日治時期因「市區改正」，廟宇山門與拜殿全遭拆除，神明暫奉於順義宮，約於民43年(西元1954年)重建完工，於民國88年(西元1999年) 再次進行整修，民國98年(西元2009年)拆除舊廟重建。
