明朝中葉,倭寇(即日本海盜)頻頻在我國浙江沿海一帶滋擾、搶竊掠奪,為打擊倭寇的猖狂行為,保護沿海百姓的生命財產安全。公元1556年(明嘉靖年間),抗倭名將戚繼光率“戚家軍”到台州抗擊倭寇,九戰痛擊倭寇,其中在新河三四次,每次都大敗倭寇,保得當地一方平安。新河百姓為了紀念他,在其戰鬥過的地方——披雲山腳下建立了戚公祠。
戚公祠位於城南村虹橋頭附近,坐北朝南。它擁有大殿三間、廂房三間,戚繼光像一座,並將明太平縣令徐鋮的三塊奏捷碑也移到了戚公祠內,附近的山頂上還有一座烽火台。整個紀念館展廳內容以展現民族英雄戚繼光保國衛民,戎馬一生為主線。由於此舉合民心、順民意,得到了文化界和政界的支持,原浙江省委書記鐵瑛同志寄來了“新河戚繼光紀念館”橫幅,王伯敏、施衛中等書畫界人士送來了書畫作品,吳延齡、陳武韜等送來了楹聯作品,給戚公祠增添了許多風采。