小林山頼岳寺は、諏訪地方における曹洞宗の筆頭寺院であり、高島藩初代藩主諏訪頼水は寛永八年(1631)上野国最大隻林寺(群馬県北群馬軍子持村)の大通関徹を招いて開創し、諏訪氏の菩提寺とした。
御廟所には諏訪頼重の従兄弟で頼水の父である頼忠とその夫人、頼水が葬られている。