子恽、憓、忭、恂。恽嗣，富平尉；憓，兴平尉。
忭，以廕三迁太子司议郎。元和九年，选尚公主，召见于麟德殿。寻尚岐阳公 主，加银青光禄大夫、殿中少监、驸马都尉。岐阳，宪宗长女，郭妃之所生。
自顷选尚，多于贵戚，或武臣节将之家。于时翰林学士独孤郁，权德舆之女婿， 时德舆作相，郁避嫌辞内职。上颇重学士，不获已许之，且叹德舆有佳婿，遂令宰 臣于卿士家选尚文雅之士可居清列者。初于文学后进中选择，皆辞疾不应，唯悰愿 焉。累迁至司农卿。太和六年，转京兆尹。七年，检校刑部尚书，出为凤翔尹、凤 翔陇右节度。丁内艰，八年，起复授忠武军节度使、陈许蔡观察等使，就加兵部尚 书。开成初，入为工部尚书、判度支。属岐阳公主薨，久而未谢。文宗怪之，问左 右。户部侍郎李珏对曰：“近日驸马为公主服斩衰三年，所以士族之家不愿为国戚 者，半为此也。杜忭未谢，拘此服纪也。”上愕然曰：“予初不知。”乃诏曰： “制服轻重，必由典礼。如闻往者驸马为公主服三年，缘情之义，殊非故实，违经 之制，今乃闻知。宜令行杖周，永为通制。”三年，改户部尚书，兼判户部度支事。 会昌中，拜中书侍郎、同中书门下平章事，寻加左仆射。
大中初，出镇西川，降先没吐蕃维州。州即古西戎地也，其地南界江阳，岷山 连岭而西，不知其极；北望陇山，积雪如玉：东望成都，若在井底。地接石纽山， 夏禹生于石纽山是也。其州在岷山之孤峰，三面临江。天宝后，河、陇继陷，惟此 州在焉。吐蕃利其险要，二十年间，设计得之，遂据其城，因号曰“无忧城”，吐 蕃由是不虞邛、蜀之兵。先是，李德裕镇西川，维州吐蕃首领悉怛谋以城来降，德 裕奏之；执政者与德裕不协，遽勒还其城。至是复收之，亦不因兵刃，乃人情所归 也。俄复入相，加司空，继加司徒，历镇重籓。至是加太傅、邠国公。忭无他才， 常延接寒素，甘食窃位而已。
从郁，以廕贞元末再迁太子司议郎。元和初，转左补阙。谏官崔群、韦贯之、 独孤郁等以从郁宰相子，不合为谏官，乃降授左拾遗。群等复执曰：“拾遗之与补 阙，虽资品有殊，皆名谏列。父为宰相，子为谏官，若政有得失，不可使子论父。” 乃改为秘书丞，终驾部员外郎。
子牧、顗，俱登进士第。顗后病目而卒。
牧，字牧之，既以进士擢第，又制举登乙第，解褐弘文馆校书郎，试左武卫兵 曹参军。沈传师廉察江西宣州，辟牧为从事、试大理评事。又为淮南节度推官、监 察御史里行，转掌书记。俄真拜监察御史，分司东都，以弟顗病目弃官。授宣州团 练判官、殿中侍御史、内供奉。迁左补阙、史馆修撰，转膳部、比部员外郎，并兼 史职。出牧黄、池、睦三郡，复迁司勋员外郎、史馆修撰，转吏部员外郎。又以弟 病免归。授湖州刺史，入拜考功郎中、知制诰，岁中迁中书舍人。牧好读书，工诗 为文，尝自负经纬才略。武宗朝诛昆夷、鲜卑，牧上宰相书论兵事，言“胡戎入寇， 在秋冬之间，盛夏无备，宜五六月中击胡为便”。李德裕称之。注曹公所定《孙武 十三篇》行于代。
牧从兄忭隆盛于时，牧居下位，心常不乐。将及知命，得病，自为墓志、祭文。 又尝梦人告曰：“尔改名毕。”逾月，奴自家来，告曰：“炊将熟而甑裂。”牧曰： “皆不祥也。”俄又梦书行纸曰：“皎皎白驹，在彼空谷。”寤寝而叹曰：“此过 隙也。吾生于角，徵还于角，为第八宫，吾之甚厄也。予自湖守迁舍人，木还角， 足矣。”其年，以疾终于安仁里，年五十。有集二十卷，曰《杜氏樊川集》，行于 代。子德祥，官至丞郎。
史臣曰：黄裳以道致君，持诚奉主；辨怀光之诈，罢全义之征。讨贼辟之凶， 举无遗算；葬执谊之柩，岂曰不仁。郢天纵之性，总丱之年，代父命于临刑，孝也； 怀光之乱，王人被伤，抚巢父于贼庭，义也；抑浮滥之流，考艺文之士，尽搜幽滞， 大变时风，正也；保止足之名，辞荣辱之路，高避世利，遐躅昔贤，智也。忠孝全 矣，仁智备矣！此二子者，皆临大节而不可夺也。佑承廕入仕，谳狱受知，博古该 今，输忠效用；位居极品，荣逮子孙，操修之报，不亦宜哉！及其宾僚紊法，嬖妾 受封，事重因循，难乎语于正矣！牧之文章，忭之长厚，能否既异，才位不伦，命 矣夫！
赞曰：贞公壮节，临难奋发。言行无玷，斯为明哲。戡乱阜俗，时泰位隆。国 之名臣，郑公、岐公。