修善寺温泉の中心にあり、修善寺の地名の由来となった。平安初期の大同2年（807年）に弘法大師が開基したもので、当時は地名が桂谷と呼ばれていたところから桂谷山寺といわれ、伊豆国禅院一千束と正史に記された。大晦日には鐘楼堂が一般の人にも解放され、除夜の鐘でにぎわう。