常熟兴福禅寺始建于南齐。南齐延兴至中兴年间（494-502年），倪德光（曾任郴州刺史）舍宅为寺，初名“大悲寺”。梁大同五年（539年）大修并扩建，改名“福寿寺”，因寺在破龙涧旁，故又称“破山寺”。唐懿宗咸通九年，敕赐大钟及“兴福寺”额，因名兴福寺。乾隆三十七年（1772年）建亭勒石，立碑在兴福寺内，至今仍完整无损。名句“曲径通幽处，禅房花木深”即吟咏此处。据寺志记载，南宋时东西两园就已成规模，匠心营造金石树木，亭台水榭。