休凉寺位于大罗山的世外桃源,四周树木林立,有清风徐来,碧水一渠,庭间更有花开花落。人站在雩观洞前,可以近观山色苍青,蓝艳鲜美,远山郁翠蓝靛,云来雾去,山色多幻,正是其间的山色变幻气象。
休凉寺始建于明代崇祯年间 ,原名休粮菴,坐落于仙岩后山东首,曾经在民国十一年的时候进行了重建,在后来的1974年、1995年、以及2007年分别对寺院进行了修缮。
清朝初期,仙岩寺住持大和尚天目超智法师,在大罗山继白云寺(唐时已有)之后又根据五行方位和颜色的不同,分别择址建立了黄云寺(中)、赤云寺(南)、青云寺(东)、蓝云寺(北),合称“五云”寺,在大罗山一带流传至今。
天目大和尚晚年多以休粮菴为清静修养之所,因避免俗众理解有误,况且此境茂林修竹之间溪流淙淙、曲径通幽,实乃修养清凉之所在,超智法师遂将休粮菴改名为“休凉寺”