绘马堂建于观音堂境内东端的悬崖旁，为入母屋结构、栈瓦屋顶建筑。
此建筑为应对观音灵场奉纳绘马的需求，设有八根露出的柱子，结构简约开放。
近世以来也用作茶所，供奉茶水，成为接待设施。
堂内四面开放，中央设有石竈，内法上方挂有众多奉纳的绘马。
明治初年以后成为参拜者的休息处，提供茶水接待和三井寺名物“弁庆力饼”。
贩卖力饼的“力轩”因绘马堂被指定为文化财而迁至从微妙寺通往观音堂的参道沿线，如今仍持续提供不变的名物风味。