寻迁尚书令，与安共掌朝政。安每曰：“朝之大事，众不能决者，谘王公无不 得判。”以年老，上疏乞骸骨，诏不许。转拜护军将军，加散骑常侍。安欲更营宫 室，彪之曰：“中兴初，即位东府，殊为俭陋，元明二帝亦不改制。苏峻之乱，成 帝止兰台都坐，殆不蔽寒暑，是以更营修筑。方之汉魏，诚为俭狭，复不至陋，殆 合丰约之中，今自可随宜增益修补而已。强寇未殄，正是休兵养士之时，何可大兴 功力，劳扰百姓邪！”安曰：“宫室不壮，后世谓人无能。”彪之曰：”任天下事， 当保国宁家，朝政惟允，岂以修屋宇为能邪！”安无以夺之。”故终彪之之世，不 改营焉。
加光禄大夫、仪同三司，未拜。疾笃，帝遣黄门侍郎问所苦，赐钱三十万以营 医药。太元二年卒，年七十三。即以光禄为赠，谥曰简。二子：越之，抚军参军； 临之，东阳太守。
棱字文子，彬季父国子祭酒琛之子也。少历清官。渡江，为元帝丞相从事中郎。 从兄导以棱有政事，宜守大郡，乃出为豫章太守，加广武将军。棱知从兄敦骄傲自 负，有罔上心，日夕谏诤，以为宜自抑损，推崇盟主，且群从一门，并相与服事， 应务相崇高，以隆勋业。每言苦切。敦不能容，潜使人害之。
弟侃，亦知名，少历显职，位至吴国内史。
虞潭，字思奥，会稽余姚人，吴骑都尉翻之孙也。父忠，仕至宜都太守。吴之 亡也，坚壁不降，遂死之。潭清贞有检操，州辟从事、主簿，举秀才，大司马、齐 王冏请为祭酒，除祁乡令，徙醴陵令。值张昌作乱，郡县多从之，潭独起兵斩昌别 率邓穆等。襄阳太守华恢上潭领建平太守，以疾固辞。遂周旋征讨，以军功赐爵都 亭侯。陈敏反，潭东下讨敏弟赞于江州。广州刺史王矩上潭领庐陵太守。绥抚荒余， 咸得其所。又与诸军共平陈恢，仍转南康太守，进爵东乡侯。寻被元帝檄，使讨江 州刺史华轶。潭至庐陵，会轶已平，而湘川贼杜弢犹盛。江州刺史卫展上潭并领安 成太守。时甘卓屯宜阳，为杜弢所逼。潭进军救卓，卓上潭领长沙太守，固辞不就。 王敦版潭为湘东太守，复以疾辞。弢平后，元帝召补丞相军谘祭酒，转琅邪国中尉。
帝为晋王，除屯骑校尉，徙右卫将军，迁宗正卿，以疾告归。会王含、沈充等 攻逼京都，潭遂于本县招合宗人，及郡中大姓，共起义军，众以万数，自假明威将 军。乃进赴国难，至上虞。明帝手诏潭为冠军将军，领会稽内史。潭即受命，义众 云集。时有野鹰飞集屋梁，众咸惧。潭曰：“起大义，而刚鸷之鸟来集，破贼必矣。” 遣长史孔坦领前锋过浙江，追蹑充。潭次于西陵，为坦后继。会充已擒，罢兵，征 拜尚书，寻补右卫将军，加散骑常侍。
成帝即位，出为吴兴太守，秩中二千石，加辅国将军。以讨充功，进爵零县侯。 苏峻反，加潭督三吴、晋陵、宣城、义兴五郡军事。会王师败绩，大驾逼迁，潭势 弱，不能独振，乃固守以俟四方之举。会陶侃等下，潭与郗鉴、王舒协同义举。侃 等假潭节、监扬州浙江西军事。潭率众与诸军并势，东西猗角。遣督护沈伊距管商 于吴县，为商所败，潭自贬还节。
寻而峻平，潭以母老，辄去官还余姚。诏转镇军将军、吴国内史。复徙会稽内 史，未发，还复吴郡。以前后功，进爵武昌县侯，邑一千六百户。是时军荒之后， 百姓饥馑，死亡涂地，潭乃表出仓米振救之。又修沪渎垒，以防海抄，百转赖之。
咸康中，进卫将军。潭貌虽和弱，而内坚明，有胆决，虽屡统军旅，而鲜有倾 败。以毋忧去职。服阙，以侍中、卫将军征。既至，更拜光禄大人、开府仪同三司， 给亲兵三百人，侍中如故。年七十九，卒于位。追赠左光禄大夫，开府、侍中如故， 谥曰孝烈。子仡嗣，官至右将军司马。仡卒，子啸父嗣。
啸父少历显位，后至侍中，为孝武帝所亲爱，尝侍饮宴，帝从容问曰：“卿在 门下，初不闻有所献替邪？”啸父家近海，谓帝有所求，对曰：“天时尚温，{制鱼} 鱼虾鲊未可致，寻当有所上献。”帝大笑。因饮大醉，出，拜不能起，帝顾曰： “扶虞侍中。”啸父曰：“臣位未及扶，醉不及乱，非分之赐，所不敢当。”帝甚 悦。隆安初，为吴国内史。征补尚书，未发，而王廞举兵，版啸父行吴兴太守。啸 父即入吴兴应廞。廞败，有司奏啸父与廞同谋，罪应斩。诏以祖潭旧勋，听以疾赎 为庶人。四年，复拜尚书。桓玄用事，以为太尉左司马。寻迁护军将军，出为会稽 内史。义熙初，去职，卒于家。
斐字思行，潭之兄子也。虽机干不及于潭，然而素行过之。与谯国桓彝俱为 吏部郎，情好甚笃。彝遣温拜斐，斐使子谷拜彝。历吴兴太守、金紫光禄大夫。 王导尝谓斐曰：“孔愉有公才而无公望，丁潭有公望而无公才，兼之者，其在卿 乎！”官未达而丧，时人惜之。子谷，位至吴国内史。
顾众，字长始，吴郡吴人，骠骑将军荣之族弟也。父秘，交州刺史，有文武才 干。众出后伯父，早终，事伯母以孝闻。光禄硃诞器之。州辟主簿，举秀才，除余 杭、秣陵令，并不行。元帝为镇东将军。命为参军。以讨华轶功，封东乡侯，辟丞 相掾。秘卒，州人立众兄寿为刺史，为州人所害，众往交州迎丧，值杜弢之乱，崎 岖六年乃还。秘曾莅吴兴，吴兴义故以众经离寇难，共遗钱二百万，一无所受。
及帝践阼，征拜驸马都尉、奉朝请，转尚书郎。大将军王敦请为从事中郎，上 补南康太守。会诏除鄱阳太守，加广武将军。众径之鄱阳，不过敦，敦甚怪焉。及 敦构逆，令众出军，众迟回不发。敦大怒，以军期召众还，诘之，声色甚厉。众不 为动容，敦意渐释。时敦又怒宣城内史陆喈，众又辨明之。敦长史陆玩在坐，代众 危惧，出谓众曰：“卿真所谓刚亦不吐，柔亦不茹，虽仲山甫何以加之！”敦事捷， 欲以众为吴兴内史。众固辞，举吏部郎桓彝，彝亦让众，事并不行。敦镇姑孰，复 以众为从事中郎。敦平，除太子中庶子，为义兴太守，加扬威将军。
苏峻反，王师败绩，众还吴，潜图义举。时吴国内史庾冰奔于会稽，峻以蔡谟 代之。前陵江将军张悊为峻收兵于吴，众遣人喻悊，悊从之。众乃遣郎中徐机告谟 曰：“众已潜合家兵，待时而奋，又与张悊克期效节。”谟乃檄众为本国督护，扬 威将军仍旧，众从弟护军将军飏为威远将军、前锋督护。吴中人士同时响应。
峻遣将弘徽领甲卒五百，鼓行而前。众与飏、悊要击徽，战于高莋，大破之， 收其军实。谟以冰当还任，故便去郡。众遣飏率诸军屯无锡。冰至，镇御亭，恐贼 从海虞道入，众自往备之。而贼率张健、马流攻无锡，飏等大败，庚冰亦失守，健 等遂据吴城。众自海虞由娄县东仓与贼别率交战，破之，义军又集进屯乌苞。会稽 内史王舒、吴兴内史虞潭并檄众为五郡大督护，统诸义军讨健。潭遣将姚休为众前 锋，与贼战没。众还守紫壁。
时贼党方锐，义军沮退，人咸劝众过浙江。众曰：“不然。今保固紫壁，可得 全钱唐以南五县。若越他境，便为寓军，控引无所，非长计也。”临平人范明亦谓 众曰：“此地险要，可以制寇，不可委也。”众乃版明为参军。明率宗党五百人， 合诸军，凡四千人，复进讨健。健退于曲阿，留钱弘为吴令。军次路丘，即斩弘首。 众进住吴城，遣督护硃祈等九军，与兰陵太守李闳共守庱亭。健遣马流、陶阳等往 攻之。闳与祈等逆击，大破之，斩首二千余级。
峻平，论功，众以承檄备义，推功于谟，谟以众唱谋，非己之力，俱表相让， 论者美之。封鄱阳县伯，除平南军司，不就。更拜丹阳尹、本国大中正，入为侍中， 转尚书。咸康末，迁领军将军、扬州大中正，固让不拜。以母忧去职。
穆帝即位，何充执政，复征众为领军，不起。服阙，乃就。是时充与武陵王不 平，众会通其间，遂得和释。充崇信佛教，众议其糜费，每以为言。尝与充同载， 经佛寺，充要众入门。众不下车。充以众州里宿望，每优遇之。以年老，上疏乞骸 骨，诏书不许。迁尚书仆射。永和二年卒，时年七十三。追赠特进、光禄大夫，谥 曰靖。长子昌嗣，为建康令。第三子会，中军谘议参军。时称美士。