瞬息与永恒的命题，在他这里有了答案。
离开邓王府后，卢照邻命运急转直下。不久，因“横事被拘”，飞来横祸，下狱。幸有友人救助，才得以出狱。随后，被贬到益州新都（四川成都附近），担任县尉（类似于公安局局长）。虽然内心无比郁闷，卢照邻仍旧坚守他认为最重要的东西，比如“天真本性”“浩然之气”。
蜀中老人见卢照邻腹有诗书气自华，问他为什么“不怀诗书以邀名”？卢照邻回答说：“岂恶荣而好辱哉？盖不失其天真也……虽吾道之穷矣，夫何妨乎浩然？”
在写给益州官员的诗中，卢照邻把自己比作北方来的一只鸟，但这只鸟特立独行，从不同流合污，从不苟同世俗：
不息恶木枝，不饮盗泉水。
常思稻粱遇，愿栖梧桐树。
智者不我邀，愚夫余不顾。
所以成独立，耿耿岁云暮。
但是，命运之箭，从未放过这只独立的鸟，这个内心坚定的落魄诗人。
在益州后期，卢照邻患上“风疾”，一种能把人折磨至死的疾病。从卢照邻自己的描述中，我们知道他患病后的身体状况：身体枯瘦，五官变形，掉发，咳嗽，四肢麻痹，肌肉萎缩，一手残废，走路浑身哆嗦，长年卧床导致局部肌肉腐烂，奇痛无比……人生的最后十年，卢照邻拖着这样的病体残躯度过。