德宗常与李泌论及宰相之选，曰：“卢杞清忠强介，人言其奸，我殊不觉。”李泌曰：“人言而陛下不觉，此杞之所以为奸也。倘陛下觉之，岂有建中之乱乎？”孔子曰：“远佞人。”倘佞人而不远，必有与之俱化者。不然，何足以为佞？
卢杞，以门廕解褐清道率府兵曹。朔方节度使仆固怀恩辟为掌、试大理评事、监察御史，以病免。入补鸿胪丞，迁殿中侍御史、膳部员外郎，出为忠州刺史。
至荆南，谒节度使卫伯玉，不悦。杞移病归京师，一历刑部员外郎、金部吏部二郎中。
慎之曾对家人说：“我虽貌陋，但心险恶，如若得势，将来家族无一幸免。”后来，他的儿子真卿也跟着他学这套手段，但终究还是被识破了。
在位期间，他多次排挤忠良和贤臣，只喜欢那些附和他的小人。他还参与了一些阴谋诡计，比如陷害杨炎和颜真卿等。但他的这些行为最终还是暴露了出来，最终被罢官并流放到边疆地区。
人们都认为他是一个非常可怕的人物，因为他既没有美貌，也缺乏智慧，却能够掌握权力并进行残酷的政治斗争。在历史上，被称作“天下的祸根”的卢杞，是一个典型的例子，用尽一切手段获取权力的坏男人。而且，即便是在当时社会普遍认为他是邪恶人物之后，他仍然能够重返政坛，这种情况在历史上极其罕见，也反映了当时朝廷内部存在的一些问题。