斗方山位于浠水县城东北35公里处，因其形方如斗，故名。相传苏轼曾来此和佛印结伴而游。明末，大别山民于此扎寨抗清。清状元刘子壮等在此留有题咏石刻。山上有崇归古寺，附近有罗汉洞、八卦洞、飞云洞、百合洞、观音洞、醒酒石、撑腰石、灯笼石、连花石、三生石等。
斗方山亦称斗方禅林，建在斗方山上，斗方禅寺历史悠久;
世传为鲁班始建;史考建于公元776年(五代后唐同光元年（923）)，有大唐无著禅师实始开建，后经历了各朝风雨，时有兴衰，故曾更名为崇果禅院，降龙祖师庙、斗方禅寺、崇归寺等。旧志记载，元代曾遭兵毁，明洪武年间重建，后来又于清朝隆庆、康熙、乾隆、道光时期不断修茸，殿堂金碧辉煌，遍布山中，历代于寺中悟道的大师也不乏其人，宋有佛印禅师、维庆法师、明代心节大师，清朝松峰和尚曾驻锡讲经，声名远播，弟子望风而拜，可谓盛极一时。
建国初，寺庙仅存上斗方三重殿堂，上殿梁、柱皆石结构，石柱八根，高4.6米，柱围2.2米，建筑牢固，造型壮观，工程巨大。殿前有月台式场地，场前有石质台阶。中殿和下殿为青砖结构，亦有石柱八根，殿内有石质佛龛。
近年来，香港印静法师会同香港佛门弟子捐资千万元修复斗方寺，古寺才开始勃发生机，在短时期内建成了大雄宝殿、天王殿、韦驮殿、客堂、斋堂、云水堂、钟鼓楼、东坡楼、牌楼、山门、僧察净舍等基础设施，雕刻了佛像数百尊，新辟了水榭亭阁等观光景点数十处，还新修了进山公路，安装了高压输电线路，启动了自来水。新建金刚塔、禅堂、大悲殿、五百罗汉堂、佛教文化艺术馆列为二期工程，现在大部分工程已经动工，其他工程也尚在筹建之中。
