到了这个阶段,鲁智深的名声再次降低了不少,毕竟他一出家,就很难再有什么大的作为,所以知道他的人不多也是正常的。
但是这种情况并没有持续多久,因为鲁智深从不打坐参禅,每夜都是鼾睡如雷,起夜之时甚至在佛殿后撒尿撒屎。搞得全寺上下非常不满,但智真长老却不闻不问。后来,鲁智深两次破戒饮酒,与寺中职事僧人发生了剧烈冲突。
而后,鲁智深在山上待了将近半年,久静思动下山散心,在半山亭碰到一个卖酒小贩。他买酒被拒,便踢倒酒贩,抢酒来喝。看守山门的和尚遵照寺规,不许醉酒的鲁智深入寺。鲁智深便借着酒劲,直接打进山门,一路打到藏殿。监寺召集寺中火工、杂工等二三十人,要教训鲁智深,却被他打得狼狈逃窜。但智真长老最终对鲁智深只是稍加训诫。一众职事僧皆有怨言,认为长老纵容包庇鲁智深。
鲁智深又待了三四个月,再次下山,到山下酒馆买酒喝。他回山途中酒劲发作,练起拳脚,竟将半山亭撞坍半边。守门和尚关闭山门,不许鲁智深入寺。鲁智深先是打坏门外的两尊泥塑金刚,打进山门后又大闹禅堂,引发“卷堂大散”。一众职事僧请求智真长老出面不果,便绕开智真长老,聚集寺中杂工、仆役二百余人,要教训鲁智深。鲁智深“指东打西,指南打北”,一直打到法堂下,最终是智真长老出面方才将其喝止住。至此,鲁智深再也无法在五台山安身,只得离开。
大闹五台山一事,才让他真正在江湖上有了名气,大家都知道有这么一个和尚,胆大妄为,喝酒吃肉,甚至连寺庙里的其他同伴都打了一个遍,所以这名气其实也不算是什么好名气。
因为把寺庙打得一塌糊涂,智真长老终于无法继续包庇鲁智深,随即修书一封,让鲁智深去东京大相国寺投奔自己的师弟智清长老,并赠送他四句偈言,称“遇林而起,遇山而富,遇水而兴,遇江而止”。鲁智深离开五台山文殊院,在山下铁匠铺打了一条水磨禅杖、一口戒刀,便取路往东京而去。他“夜住晓行”,半个月后来到桃花山,因错过了宿头找不到客店,便到山下的桃花村刘太公家中借宿。