該寺始建於唐貞觀年間。原名叫白衣庵。傳說每當夏秋季節，這裡白雲缭繞，景色奇異，因此，更名為白雲寺。該寺歷史上多次毀於兵火戰亂，又多次重修、擴建。近幾年又進行了一次大的整修。

    該寺現占地百余畝，坐北朝南。寺門雄偉，上書“白雲禅寺”四個大字。中軸線上依次為天王殿、觀音殿、大雄寶殿。大雄寶殿右側為養心殿，後左側有禅堂，禅堂左右有廂房。均系清代建築。