七年，迁左卫将军，俄为安西长史、南郡太守，秩中二千石。会司州刺史马仙琕北伐还军，为魏人所蹑，三关扰动，诏睿督众军援焉。睿至安陆，增筑城二丈余，更开大堑，起高楼，众颇讥其示弱。睿曰：“不然，为将当有怯时，不可专勇。”是时元英复追仙琕，将复邵阳之耻，闻睿至，乃退。帝亦诏罢军。明年，迁信武将军、江州刺史。九年，征员外散骑常侍、右卫将军，累迁左卫将军、太子詹事，寻加通直散骑常侍。十三年，迁智武将军、丹阳尹，以公事免。顷之，起为中护军。
十四年，出为平北将军、宁蛮校尉、雍州刺史。初，睿起兵乡中，客阴俊光泣止睿，睿还为州，俊光道候睿，睿笑谓之曰：“若从公言，乞食于路矣。”饷耕牛十头。睿于故旧，无所遗惜，士大夫年七十以上，多与假板县令，乡里甚怀之。十五年，拜表致仕，优诏不许。十七年，征散骑常侍、护军将军，寻给鼓吹一部，入直殿省。居朝廷，恂恂未尝忤视，高祖甚礼敬之。性慈爱，抚孤兄子过于己子，历官所得禄赐，皆散之亲故，家无余财。后为护军，居家无事，慕万石、陆贾之为人，因画之于壁以自玩。时虽老，暇日犹课诸儿以学。第三子棱，尤明经史，世称其洽闻，睿每坐棱使说书，其所发擿，棱犹弗之逮也。高祖方锐意释氏，天下咸从风而化；睿自以信受素薄，位居大臣，不欲与俗俯仰，所行略如他日。
普通元年夏，迁侍中、车骑将军，以疾未拜。八月，卒于家，时年七十九。遗令薄葬，敛以时服。高祖即日临哭甚恸。赐钱十万，布二百匹，东园秘器，朝服一具，衣一袭，丧事取给于官，遣中书舍人监护。赠侍中、车骑将军、开府仪同三司。谥曰严。
初，邵阳之役，昌义之甚德睿，请曹景宗与睿会，因设钱二十万官赌之，景宗掷得雉，睿徐掷得卢，遽取一子反之，曰“异事”，遂作塞。景宗时与群帅争先启之捷，睿独居后，其不尚胜，率多如是，世尤以此贤之。子放、正、棱、黯，放别有传。
正字敬直，起家南康王行参军，稍迁中书侍郎，出为襄阳太守。初，正与东海王僧孺友善，及僧孺为尚书吏部郎，参掌大选，宾友故人莫不倾意，正独澹然。及僧孺摈废之后，正复笃素分，有逾曩日，论者称焉。历官至给事黄门侍郎。
棱字威直，性恬素，以书史为业，博物强记，当世之士，咸就质疑。起家安成王府行参军，稍迁治书侍御史，太子仆，光禄卿。著《汉书续训》三卷。
黯字务直，性强正，少习经史，有文词。起家太子舍人，稍迁太仆卿，南豫州刺史，太府卿。侯景济江，黯屯六门，寻改为都督城西面诸军事。时景于城外起东西二土山，城内亦作以应之，太宗亲自负土，哀太子以下躬执畚锸。黯守西土山，昼夜苦战，以功授轻车将军，加持节。卒于城内，赠散骑常侍、左卫将军。睿族弟爱。
爱字孝友，沈静有器局。高祖父广，晋后军将军、北平太守。曾祖轨，以孝武太元之初，南迁襄阳，为本州别驾，散骑侍郎。祖公循，宋义阳太守。父义正，早卒。
爱少而偏孤，事母以孝闻。性清介，不妄交游，而笃志好学，每虚室独坐，游心坟素，而埃尘满席，寂若无人。年十二，尝游京师，值天子出游南苑，邑里喧哗，老幼争观，爱独端坐读书，手不释卷，宗族见者，莫不异焉。及长，博学有文才，尤善《周易》及《春秋左氏》义。
袁抃为雍州刺史，辟为主簿。遭母忧，庐于墓侧，负土起坟。高祖临雍州，闻之，亲往临吊。服阕，引为中兵参军。义师之起也，以爱为壮武将军、冠军南平王司马，带襄阳令。时京邑未定，雍州空虚，魏兴太守颜僧都等据郡反，州内惊扰，百姓携贰。爱沉敏有谋，素为州里信伏，乃推心抚御，晓示逆顺；兼率募乡里，得千余人，与僧都等战于始平郡南，大破之，百姓乃安。
萧颖胄之死也，和帝征兵襄阳，爱从始兴王憺赴焉。先是，巴东太守萧璝、巴东太守鲁休烈举兵来逼荆州，及憺至，令爱书谕之，璝即日请降。
中兴二年，从和帝东下。高祖受禅，进号辅国将军，仍为骁骑将军，寻除宁蜀太守，与益州刺史邓元起西上袭刘季连，行至公安，道病卒，赠卫尉卿。子乾向，官至骁骑将军，征北长史，汝阴、钟离二郡太守。
陈吏部尚书姚察曰：昔窦融以河右归汉，终为盛族；柳惔举南郑响从，而家声弗霣，时哉！忱之谋画，亦用有成，智矣。韦睿起上庸以附义，其地比惔则薄，及合肥、邵阳之役，其功甚盛，推而弗有，君子哉！