莫名其妙衰落了，成为人迹罕至之地。
而这山上的寺庙，却不是叫寒山寺，反而是名为灵济寺，与这寒山是风马牛不相及的名字，当时屈席还专门请教慕容羽等人，这才知道，这灵济寺的由来，乃是和一名游方僧人有关，据记载，本来这寒山之上，因为特殊的气候，是少有人来的，除了偶尔有采药人，一般是没人会来这的，更不要说什么寺庙了。
而这一切，都是因为那名游方僧人，因为这名游方僧人定居在了此处，并且，大开方便之门，但凡是前来求诊的，他没有一个拒绝的，而且，更为重要的是，但凡是他出手的，就没有一个是没有救治成功的，所以，这个原本冷冷清清的寒山之上，开始慢慢的热闹了起来。、
一开始不过是一个小木屋，但随着经常下山帮人们诊断，却不收诊金，甚至连药钱都不收。于是，受他恩惠的人都主动帮他采药，后来，人们干脆主动前往这位游方僧人处就诊，送上衣食之类的东西，甚至，为了方便这位游方僧人，寒山附近的小村庄，甚至不少苏州城内的地主，也是有钱的出钱，有力的出力，在游方僧人周围建起了一座寺庙。
一开始，寺庙是没有名字的，人们都称呼为无名寺，直到后来有一天，游方僧人突然消失了，人们怎么也找不到他的踪迹，后来有传言说，这位游方僧人得道了，也有人说这位游方僧人离开了，但是却没有人说他是死了。
总之人们将这位游方僧人不断神化，但是，他们突然才发现，原来，自己等人甚至都不知道这位大师的名字，但是总不能一直叫对方无名大师吧，总感觉对这位帮助他们良多的大师，不是很尊重，直到有一位宿老说。
既然这位大师救济贫困百姓，治病医人，还分文不取，取一个“济”字不足为过，这个济，是救济世人，济苦济难的济，人们也都相信这位大师是得道了，所以，就称这位大师为“灵济”大师。
也是因此，这座寺庙被称为灵济寺，寺庙内一开始，没有供奉什么菩萨，就只供奉了这位“灵济”大师，后来，这座“灵济”寺，就成为了南来北往的游方僧人挂单的寺庙，而且，因为寒山的特殊性，很多挂单的游方僧人都定居在了这座寺庙，成为了“灵济”寺的一员。
于是，在不知不觉中，这座“灵济”寺的人越来越多，由于“灵济”寺的和尚为了衣食，要经常下山化缘，经常为人们治病，所以，“灵济”寺慢慢的，越来越有名。
但是，正如“灵济”寺的名气来的突然，好像一下子就远近闻名了，去的也是一般，突然之间，整个“灵济”寺，仿佛就成了一种禁忌，“灵济”寺的和尚，突然之间全部消失，再也没有出现过。
“灵济”寺的突然沉默，甚至还影响了寒山周围的小村庄，本来在寒山附近的几个村庄，陆陆续续的搬走了，从此，再也没有了寒山“灵济”寺，就仿佛，从来没有过这个地方一般。