1588（永禄元年）年，当时的上野原城主加藤丹后守景忠将其作为加藤家的菩提寺，从真言宗改为曹同宗，迁至现在的位置。
寺院正殿的铜制云版（吃饭和法事时敲响的佛具）是南北朝时代1373（应安6）年制成的山梨县内留存的最古老的云版，是山梨县指定的文化财产。其表面上刻有“武州”字样，推测是作为战利品带回的。
中里介山在时代小说《大菩萨峠》中写道“甲州上野原之报（保）福寺，此称为月见寺”，正门的右侧有中里介山手书的“月见寺”石碑。山梨县内留有中里介山真迹的石碑，只有这里以及大菩萨峠山顶的石碑这两块石碑。