这个成语来源于《欧阳文忠集.与高司谏书》，昨日安道贬官，师鲁待罪，足下犹能以面目见士大夫，出入朝中，称谏官，是足下不复知人间有羞耻事尔。
北宋时期的欧阳修，是一位有多方面才能的学者。他既是散文家、诗人，又是史学家、经学家、目录学家和金石学家。他四岁丧父，从小生活非常贫困，母亲无力送他上学，只是以荻草枝儿作笔、以沙滩为纸教他识字。
十岁后，欧阳修向有藏书的人家借书。读到特别喜爱的书，就从头到尾抄下来。他的记忆力很强，有时书还未抄完，他就能够背诵了。
二十二岁那年，欧阳修参加进士科考。连考三次，都获得第一名。第二年他复试录取后，被派到西京任留守推官，当地方行政长官的助手，从此他开始了官场生活。
不久，欧阳修卷入了一场政治革新与反革新的斗争中去。当时，各地不断发生农民起义，北方又有西夏入侵，朝廷统治集团内部矛盾非常尖锐。担任参知政事的范仲淹上书宋仁宗，提出革除弊政的十项措施，还指出宰相吕夷简任意超格提拔官吏、滥用私人等情况。为此，他遭到以吕夷简为首的保守派的攻击和抵毁。
在这之后，在吕夷简等的诬蔑下，范仲淹受到降职处分，被贬到外地去做官。欧阳修等人却同情范仲淹，为他鸣不平。
当时，有个名叫高若纳的谏官，不仅不主持公道，反而和吕夷简一鼻孔出气，伙同权奸诽谤贤士，认为范仲淹应当被斥逐。欧阳修对此十分愤怒，特地写了一封信给高若纳斥责他。信中说，昨天这个贬官，那个待罪，而你居然还有脸见众官员，大模大样地在朝中走进走出，并且称是谏官，简直是不知道人间有羞耻这回事了。这就是欧阳修的名篇《与高司谏书》。
欧阳修的这封书信，触怒了高若纳和吕夷简一伙。他们立即采取报复行动，奏告仁宗，结果把欧阳修逐出京都，降职到外地去当县令。直到几年后朝廷重新起用范仲淹，欧阳修才同时被恢复原官，回到京都供职。
