辩论，人送外号“义虎”。
众人听说“义虎”来访，知道他是来辩论的，都为智顗担心。
慧荣进来后，与智顗施礼毕，坐下问道：“听说，法师道法超众，连朝中的大臣都对您毕恭毕敬，奉若神灵，我现在想见识见识。”
智顗对他只是淡然一笑，平淡地说：“我才疏学浅，本没有什么才能。只是为弘扬佛法，普渡众生尽一份微薄之力罢了。”
慧荣得意地晃动着手中的扇子，正要开口发问，不料扇子却失手扔出，慧荣俯身去拾，惹得众生哄声大笑：“过去的义虎，今天怎么变成了伏鹿？慌乱如此，还有什么可说的。”
慧荣拾起扇子，面带愧色，灰溜溜地走了。
过了一段时间后，智顗想离开京城，到一个清净的地方修行。他对众弟子说：“京城杂乱，对修持不利。我在瓦宫寺传禅定，第一年有四十人学禅，得法者有二十人；第二年一百人，得法者仍是二十人；第三年有二百人，得法者却只有十人。近来学法的人更多，得道的人却更少。看来，如此下去，与弘法不利，他决定离开京城，找一个安静的地方弘法修炼。”
智顗曾做过一个梦。梦中，他看到有岩崖万重，白云缭绕，红日挂在一边，沧海无边，浪涛翻滚。
在山上，一个僧人向他招手。智顗把梦中所见的地方描述给弟子们，弟子们说那是会稽山中的天台山，是圣贤们曾住过的地方。
智顗想起此事后，决定带领弟子上天台山。此事传出后，金陵的众人，都纷纷前来挽留，甚至连皇帝也传挽留。但智顗决心已定，没有再留下。
智顗没到天台山时。僧人定光住在那里。