德宗常与李泌论及宰相之选，曰：“卢杞清忠强介，人言其奸，我殊不觉。”李泌曰：“人言而陛下不觉，此杞之所以为奸也。倘陛下觉之，岂有建中之乱乎？”孔子曰：“远佞人。”倘佞人而不远，必有与之俱化者。不然，何足以为佞？文献记载卢杞字子良，是怀慎孙。父奕，为天宝末东台御史中丞；洛城陷于安禄山，被害。杞以门廕解褐清道率府兵曹。
朔方节度使仆固怀恩辟为掌、试大理评事、监察御史，以病免入补鸿胪丞，迁殿中侍御史、膳部员外郎出为忠州刺史至荆南谒节度使卫伯玉，不悦。杞移病归京师历刑部员外郎金部吏部二郎中。
慎之一生貌陋色如蓝，而心险恶，不耻恶衣粝食，以此被世所弃。但他颇有口辩，因而得进身高位。当时尚有父子仪病百官造问，但凡见到他都屏去姬妾，只独自一人在旁等待。他去后，其家人问其故，被告知“形陋而心险”、“左右见之必笑”，若是这般人才得志，即吾族无类矣。这便是颜真卿对他的评价。
后来卢杞因排挤杨炎被贬崖州司马，并且遭到了众人的痛恨。在德宗的朝廷上，他又阴谋诡计，与朱滔结怨，最终导致了朱滔的死讯传来。在这个过程中，他还曾经试图排挤另一位名臣张镒，但最终因为自己的阴谋暴露了出来，最终失去了权力并遭到了人们的唾弃和憎恨。
在一次事件里，当时的人们因为卢杞的残酷政策，对他的行为感到愤怒，他们甚至拿起武器想要杀掉他。在另一个场合下，一位叫赵赞的大臣为了讨好卢杞，便提出了一种新的税收法，即对房屋进行估价，每间房屋按照三等级计算赋税，这个法案很快就引起了公众的广泛反对，因为它极其苛刻和复杂。此外，他还提出了除草法，让所有土地所有者必须按照新规定支付一定比例的税款，这同样激发了民众的强烈抗议。
最后，在一次政治斗争中的混乱局面下，当时有人认为应该重新审视一下关于他的使用问题，因为他的行为已经严重损害了国家利益和人民福祉。但最终，这些呼声未能得到应有的回应，因此历史上的许多人物对于他的评价都是负面的。而这正是《资治通鉴》所描绘的一段黑暗历史的一个缩影——一个人手握大权却行巫术般的手段来维持自己统治，从而毁灭着整个社会秩序。