唐德宗李适执政期间，很希望能一展宏图，于是广招贤士，作为自己的得力助手。当时的宰相崔祐甫极力向李适推荐很有文学才干的杨炎。在李适还是太子的时候就曾听说过杨炎的名声，于是欣然接受崔祐甫的建议，任用了杨炎。

杨炎作为一个被贬的官员，能被封为宰相已经是一件很难得的事情了，上任后短短几个月，由于他辅佐得力，不断创下佳绩，因此被赞誉为贤相。宰相崔祐甫患病后，不能再处理政事，另一个宰相乔琳也被免职，这些情况使杨炎得以独揽大权，野心和私欲也不断膨胀。

杨炎性格中的弊端慢慢显露出来，专权不久，他便开始报恩复仇。杨炎一直对元载心怀感激，总想为他做一些事情用来报答知遇之恩。他先奏请李适要求实施元载生前提出的在原州修建城堡的规划。李适就派人去向泾原节度使段秀实征询意见，段秀实十分刚正不阿，直言不讳地指出其中的弊端，他说：“在边境建立防线以便抵御外敌侵犯是一件十分长远的事情，应该从长计议，不应该如此草率而为之。而且修建城堡需要很多人力，要大量的去征徭役，现在春天的播种工作刚刚结束，还有很多后续的农事要做，农事是百姓的大事，您应该分清轻重缓急，请等到农耕的间隙再考虑此事吧。”杨炎听说了段秀实的话以后，勃然大怒，认为段秀实想限制自己，于是解除了段秀实节度使的职务，征召为司农卿。

杨炎任命邠宁节度使李怀光代替段秀实的职务，让他率军转移到原州驻扎，又派朱泚和崔宁各统领万名士兵作为他的帮手，让将士们开始筑城，将士们十分愤怒。李怀光作为朔方军帅，法令严苛，接连杀死了几名提出异议的大将。泾州副将刘文喜利用将士们怨恨的心情，拒绝接受朝廷的命令，上奏要求段秀实重新担任主帅，如果不同意，就让朱泚为帅，于是朝廷任命朱泚代替李怀光。可是刘文喜出尔反尔，还是不接受命令，竟然拥兵自守，还请求吐蕃前来援助。许多朝臣害怕引起叛乱，就建议唐德宗李适息事宁人，赦免刘文喜，大事化小小事化了。但是李适没有接受建议，而是命令朱泚、李怀光等人带兵攻打刘文喜，大战一触即发。在关键的时刻，泾州别将刘海宾杀死了刘文喜，这才没有引起边患。

杨炎除了以个人喜怒撤换主帅外，还一手造成了刘晏的冤案。在很早以前，左仆射刘晏还在担任吏部尚书的职务，杨炎那时担任侍郎，两个人互相看不顺眼，常常有不和。后来到了元载之案的时候，刘晏负责审理，元载被杀，和元载关系很好的杨炎也受到牵连被贬，所以他对刘晏一直怀恨在心。唐德宗李适即位后，由于刘晏长期负责掌管财政大权，许多朝臣都十分妒忌他，就上奏提议罢免他，但是一直没能实现。杨炎担任宰相后，一心想为元载报仇，就在李适面前哭诉道：“刘晏和黎干、刘忠翼等人同谋，臣作为宰相不能征讨他，真是罪该万死啊！”杨炎还建议李适剥夺刘晏的财政大权，想要削弱他的势力。李适听从了杨炎的建议，罢免了刘晏关于财政的职务。但是杨炎还是没有罢休，又以刘晏奏事不实为理由，贬他为忠州刺史。当时有个地方官员为了迎合杨炎，诬告刘晏写信给朱泚请求营救，言语有反叛之意。由于杨炎为那位官员作证，所以李适信以为真，秘密派人到忠州杀死了刘晏。

但是朝廷上的很多官员都很了解杨炎的为人，觉得这件事有些蹊跷，纷纷为刘晏鸣不平。李正己多次上表，询问刘晏因为何罪被杀，讥讽朝廷听信谗言，还说了杨炎派遣使者前往各镇将过错推给皇帝的事情。李适派宦官到李正己那里核实情况，当他发现事情全部属实，十分愤怒，产生了诛杀杨炎的想法。但是没有立刻公布出来，而是想一步一步地把杨炎的权力夺回来。他提升卢杞为门下侍郎、平章事，改任杨炎为中书侍郎，仍为平章事，但不再纵容杨炎专权了。

卢杞是个相貌丑陋，没有文学才干的人，杨炎十分瞧不起他，不想和他同时执政，经常假托有病不和他在一起共事，在议事的时候又多有意见不合的情况。卢杞觉得受到了轻视和侮辱，他为人狡诈，为了发展自己个人的势力和威信，对那些不依附自己的人就狠下毒手，他等待着机会，想要把杨炎害死。

当唐德宗李适任命淮西节度使李希烈统领各军讨伐梁崇义的时候，杨炎劝谏说：“他是董秦的养子，为人暴虐不堪，让他去平定崇义，日后很难控制。”但是李适不听，还对杨炎更加不满，罢免了杨炎的宰相职务，让他担任了其他职务。杨炎入朝谢恩，没有去中书省与卢杞见面，卢杞觉得杨炎眼中根本没有自己，于是更加恨他。

不久之后，卢杞引荐严郢为御史大夫。严郢担任京兆尹的时候，由于不依附于杨炎，所以杨炎指使御史张著弹劾他，又提拔了与严郢有矛盾的源休为京兆尹。于是，卢杞想利用严郢与杨炎的积怨来打压杨炎。杨炎的儿子杨弘业不学无术，经常违法乱纪，私自接受别人的贿赂，被人告发，严郢审理此案时，顺藤摸瓜地查出了杨炎的其他罪行。杨炎在修建家庙时，请河南尹赵惠伯为他出卖东都的私宅，赵惠伯就把此宅买来作为官署。严郢认为赵惠伯是故意出高价买了杨炎的宅子，变相行贿。此外，更有流言蜚语说杨炎在王气的地方修建家庙，想要改朝换代。李适听说后勃然大怒，将杨炎流放，杨炎预感到前景不妙，写诗感叹：“一去一万里，千知千不还。崖州何处是，生度鬼门关。”在半路上，李适又下诏赐死杨炎，终年五十五岁。

贤臣刘晏和杨炎就这样相继死去，这两位大臣虽然有性格上的缺陷，但都力主改革，很有才干。在这之后，朝中的官员变动十分频繁，由于之前发生的叛乱和宦官专权留下了太多的阴影，所以李适经常猜疑，不敢过分相信别人，而且固执己见，但是疑人不用用人不疑，所以李适纵有一腔热血和宏图之志，也没能一如既往地执行下去。