高山縣城遺址位於安徽省來安縣新安鎮東北26公裡處的王集鄉高山村內的高山崗上，呈方形。長70米，寬60米。城址內散存大量碎磚瓦。舊城廢於何時待考。

據《漢書》記載，原高山縣地秦時屬東海郡，漢時屬臨淮郡，後漢永平十五年(公元72年)更為下邳國高山縣。

1985年，來安縣文物工作組在對該遺址進行調查時，發現大量唐宋瓷片，並在遺址附近一農民家裡發現明代青花瓷瓶一件(為1983年出土)。