玉泉寺由北魏僧意所创建，金代又有僧善宁重建，元代僧普谨增建七佛阁，后屡兴屡废。古时山民曾在山谷内拾到罗汉像，因名佛峪、佛谷。又因南有谷山，东有玉泉，又名谷山寺、谷山玉泉寺，俗名佛爷寺。今遗址内存碑碣10块，周围有千年古栗树20余株。院内原有大雄宝殿，中祀释迦，侧立十八罗汉，四周有壁画。
玉泉寺内有唐植银杏三株，参天蔽日。树下有元代杜仁杰撰、严忠范书《重修谷山寺记》碑及明代《田园记》碑。环望院内，大殿高耸，古树挺拔，碑碣肃立，一派古刹风貌。 寺后山岗有一古松，树冠如棚，蔽荫山冈，名一亩松。