他说，太后受先帝遗命，调护皇上十多年，是尽了责的，因此我们应当掩蔽她那些小的过失，以保全太后的名望。刘太后过世时留得有遗嘱，要宋仁宗立杨氏为皇太后，并参加军国大事的议决。又是范仲淹表示了反对的意见。

他说，太后是皇帝母亲的称号，自古以来没有因为保育的原因而代立为太后的。如今一个太后去世了又马上另立一个太后，天下人就会怀疑皇上是不是一天也离不开母后的帮助呢?因为范仲淹反对得有理，继立太后一事方得作罢。

这次范仲淹回朝的时间并不长。刘太后一死，宋仁宗可以自己作主了，他便借口第一个老婆郭皇后没有生育，要废了郭皇后另立皇后。范仲淹认为皇后不应轻易废除，便和众谏官、御史劝宋仁宗改变主意，然而没有说动宋仁宗。他准备第二天上朝时再争，第二天他刚到待漏院就得到了通知，要他到睦州(今浙江建德)去当知州。

他这次被贬出京，僚友们送得更远，直到长亭，并赞许他这次被贬“此行愈光”。宋仁宗景祐三年(1036)范仲淹第三次被贬，是因为上《百官图》之故。范仲淹后来回朝当上了吏部员外郎，并兼知开封府。这时的宰相是吕夷简。这个吕夷简在宋仁宗手下执政时间很长，宋仁宗刚亲政时政治清平、天下安定，他是做出了贡献的，因此，他也是一代名相。

但因为他执政时间长，门生故旧自然也多，当时朝中官员大多出自其门下。于是范仲淹上《百官图》，剖析了朝中百官和吕夷简的关系。这就触怒了吕夷简，加之那时他对范仲淹还不甚了解，一气之下以要率百官罢职相威胁。这时的宋仁宗是很倚重吕夷简的，于是一道命令，将范仲淹贬到饶州(今江西上饶地区)去当知州。这一次，僚友们一直送他到京郊，更称赞他“此行尤光”!