《铁围山丛谈》一书正是蔡絛流放白州时所作。白州境内有山名铁围山,位于今广西玉林西,古称铁城。絛尝游息于此。余嘉锡先生《四库提要辨证》对《铁围山丛谈》做了较为详尽地考证,言之凿,足资参考。书中还征引近人文廷式《纯常子枝谈》卷十三对铁围山的描述:“铁围山,佛家多言之,然皆与《丛谈》之义不相关涉。在众多的宋代史料笔记中,《铁围山丛谈》是很重要的一种,颇受历代学者重视,多为后人所征引。它记载了从宋太祖建隆年间至宋高宗绍兴年间约二百年的朝廷掌故、宫闱秘闻、历史事件、人物轶事、诗词典故、文字书画、金石碑刻、等诸多内容,色彩斑谰,异常丰富,可谓一部反映北宋社会各阶层生活状况的鲜活历史长卷。文字生动流畅,要言不烦,浅显易懂,读来颇感清新。