《古木怪石图》（宋，苏轼绘）
苏轼因在返京的途中见到新法对普通老百姓的损害，故很不同意宰相王安石的做法，认为新法不能便民，便上书反对。这样做的一个结果，便是像他的那些被迫离京的师友一样，不容于朝廷。于是苏轼自求外放，调任杭州通判。
苏轼在杭州待了三年，任满后，被调往密州、徐州、湖州等地，任知州。
这样持续了有大概十年，苏轼遇到了生平第一祸事。当时有人故意把他的诗句扭曲，大做文章。元丰二年（1079年），苏轼到任湖州还不到三个月，就因为作诗讽刺新法，“文字毁谤君相”的罪名，被捕下狱，史称“乌台诗案”。
苏轼坐牢一百零三天，几濒临被砍头的境地。幸亏北宋在太祖赵匡胤年间即定下不杀大臣的国策，苏轼才算躲过一劫。
出狱以后，苏轼被降职为黄州团练副使（相当于现代民间的自卫队副队长）。这个职位相当低微，而此时苏轼经此一狱已变得心灰意懒，于公余便带领家人开垦荒地，种田帮补生计。“东坡居士”的别号便是他在这时为自己起的。
