被吕夷简排挤陷害，罢为刑部尚书，到亳州当知府。当时元昊攻打延州，宋军损失惨重，李迪自请戍边，仁宗不许，命李迪为彰信军节度使，知天雄军，调知青州。
次年，驻守本镇，李迪请求告老回乡，被封为太子太傅后致仕，回到了濮州。
公元1047年11月1日，李迪病逝于家中，享年七十七岁，仁宗追赠李迪为司空、侍中，谥号“文定”，并亲自题其墓碑为“遗直之碑”，又改其所葬的邓侯乡为“遗直乡”。
这就是这位大名鼎鼎的画家李迪的生平，按照他的生平来看，其实他当画家不过就是个兼职，他主要的工作，其实是个政客。
但是他这一生，可以说是非常的成功，不光是宦海沉浮，几经起落，不过最后的结局还算不错，而且在民间的口碑也非常好，最后还落得个忠臣良相的好口采。
这样的生平，就给他的画作加成了不少。
再加上他这副《红白芙蓉图》质量确实上乘，所画红白芙蓉各一幅，线描技巧方面，非常有有黄筌的画风精神。
而且画图造像描写极为写实，在中国历史上属于非常罕见的风格，在用笔方面也非常讲究，笔锋纤细且色彩层次微妙，这样就让这红白芙蓉富有情趣，对