明年，迁侍中。二十四年，拜尚书左丞相，罢知政事，累封赵城侯。时夷州刺 史杨浚犯赃处死，诏令杖六十，配流古州。耀卿上疏谏曰：
伏以圣恩天覆，仁育庶类，凡死罪之属，不欲尸诸市朝，全其性命，流窜而已。 所以政致刑措，狱无冤人，旷古以来，未有斯美。臣愚以为全生免死，诚为至化， 有耻且格，为训将来。苟有未安，不敢缄默。
臣以为刺史、县令，与诸吏稍别，人之父母，风化所瞻，一为本部长官，即合 终身致敬。决杖者，五刑之末，只施于抶扑徒隶之间，官廕稍高，即免鞭挞。令决 杖赎死，诚则已优，解体受笞，事颇为辱。法至于死，天下共之，刑至于辱，或有 所耻。况本州刺史，百姓所崇，一朝对其人吏，背脊加杖，屈挫拘执，人或哀怜， 忘其免死之恩，且有伤心之痛，恐非敬官长劝风俗之意。
又杂犯死罪，无杖刑，奏报三覆，然后行决。今非时不覆，决杖便发，倘狱或 未尽，又暑热不耐，因杖或死，即是促其处分，不得顺时。将欲生之，却夭其命， 又恐非圣明宽宥之意。前后频在州县，或缘杂犯决人，每大暑盛夏之时，决杖多死， 秋冬已后，至有全者。伏望凡刺史、县令于本部决杖及夏暑生长之时，所定杖刑， 并乞停减。即副陛下好生之德，于死者皆有再生之恩。
俄而特进盖嘉运破突骑施立功还，诏加河西、陇右两节度使，仍令经略吐蕃。 嘉运既承恩宠，日夕酣宴，不时赴军。耀卿密上疏曰：“伏见盖嘉运立功破贼，更 委两军，以勇果之才，承战胜之势，吐蕃小丑，不足歼夷。然臣近日与其同班，观 其举措，精劲勇烈，诚则有余，言气矜夸，恐难成事。莫敖败于蒲骚之役，举趾稍 高，《春秋》书之为惩诫。恐其有骄敌之色，臣窃忧之。入秋防边，日月稍逼，接 对人吏，须识其宜。今将抚边军，未言发日，若临事始去，人吏未识，虽决在一时， 恐将非制胜万全之道。况兵未训练，不知礼法，人未怀惠，士未同心，求其忘性命 于一时，惮严刑于少选，纵威逼而进，因而立功，恐非师出以律，久长之义。又万 人性命，决在将军，不得已而行之，凿凶门而即路。今酣宴朝夕，优渥有余，亦恐 非爱人忧国之意，不可不察。若不可回换，即望速遣进途，仍乞圣恩，勖以严命。” 疏奏，上乃促嘉运赴军，竟以无功而还。
天宝元年，改为尚书右仆射，寻转左仆射。一岁薨，年六十三，赠太子太傅， 谥曰文献。子综，吏部郎中。综子佶。佶，字弘正，幼能属文。弱冠举进士，补校 书郎，判入高等，授蓝田尉。时有诏命畿内诸县城奉天，时严郢为京兆，政尚峻暴， 加以朝旨甚迫，尹正之命，急如风霆。本曹尉韦重规其室方娠而疾，畏郢之暴，不 敢以事故免。佶因请代，役无愆程，当时义之。德宗南狩，佶诣行在，拜拾遗，转 补阙。李怀光以河中叛，朝廷欲以含垢为意，佶抗议请讨，上深器之，前席慰勉。 三迁吏部员外，历驾部兵部郎中，迁谏议大夫。会黔中观察使韦士宗惨酷驭下，为 夷獠所逐，俾佶代之，酋渠自化。其后为瘴毒所侵，坚请入觐，拜同州刺史。征入 为中书舍人，迁尚征入为中舍人，迁尚书右丞。时兵部尚书李巽兼盐铁使，将以使 局置于本行，经构已半，会佶拜命，坚执以为不可，遂令彻之。巽恃恩而强，时重 佶之有守，就拜吏部侍郎。以疾除国子祭酒，寻迁工部尚书致仕。元和八年卒，年 六十二，赠吏部尚书。佶清劲温敏，凡所定交，时称为第一流。与郑余庆特相友善， 佶殁后，余庆行朋友之服，搢绅美之。
史臣曰：魏知古、卢怀慎、源乾曜、李元纮、杜暹、韩休、裴耀卿，悉蕴器能， 咸居宰辅。或心存启沃，或志在荐贤，或出爱子为外官，或止屯田于关辅，或不受 蕃人之赂，或坚劾伯献之奸，或广漕渠以充国用：此皆立事立功，有足嘉尚者也。 卢、李、杜三君子，又以清白垂美简书，公孙弘之流也。乾曜职当机密，无所是非， 持禄保身，焉用彼相？
赞曰：卢、魏、乾曜，弼违进贤。裴、韩、李、杜，远财劾奸。汗简书事，清 风肃然。万岁之后，其名不刊。