𨪜何承天既然不能擔任吏部尚書，而此職位空缺著，加之范曄之後，劉義隆身邊需要有這樣一個能參與機密的人——這人倒不一定要像范曄那樣擔任太子詹事兼左衛將軍，於是一連幾天，劉義隆就在斟酌著，躊躇著。最終，他把目光停留在自己身邊的侍中兼尚書吏部郎庾炳之的身上。當年劉湛協附司徒義康而與殷景仁交惡，凡是朝廷文武官員去殷府的，就不得再去劉府，只有庾炳之來往於二府之間，暗裡卻盡忠於朝廷；殷景仁稱病不朝見數年，皇上總是讓庾炳之奉使命來往傳達心意，劉湛也從不生疑。劉湛被誅以後，庾炳之擔任吏部郎，漸漸參與機密，不久升任侍中。
𨪜𨪜庾炳之在升任為吏部尚書之後，又兼任義陽王師（義陽王劉昶，皇九子），於是勢傾朝野，內外歸附。但庾炳之為人性情急躁，待人接物往往很不耐煩。賓客申說辯理稍不合意，他就怒形於色，甚至破口大罵。他一向又無學問，在那個講究學問的時代裡就不為群臣推崇。他又有潔癖，士大夫造訪他還沒有離開他的家門，他就令下人擦拭蓆子和坐榻，世人每每譏刺他。擔任掌管官員任免要職的吏部尚書後，他既不採納眾議，又好受賄賂。他任用少府卿劉道錫為廣州刺史，劉道錫到廣州後送給他一駕白檀木製作的牽車，他就常常坐著它出入府內外，沾沾自喜。有人稟告皇上，皇上閒時就委婉地問他：「道錫贈卿小車，裝飾華麗，坐上它感覺如何？」庾炳之一驚，趕忙起身道歉。
𨪜𨪜儘管如此，庾炳之卻並沒有對自己所行不法之事做一些收斂。
𨪜𨪜元嘉二十五年正月，庾炳之請假回家，他的屬官吏部令史錢泰和主客令周伯齊到他的家中咨詢事務。因錢泰長於彈奏琵琶，周伯齊又有一副出眾的歌喉，庾炳之就讓他們留宿在自己家中，和歌伎們在一起盡享歌舞絲竹之樂。尚書省有嚴格的規定：令史咨詢事務，不得停宿在外，即使有八座（指尚書省的八位高級官員五曹尚書、二僕射和一令）命，也不可。因此，庾炳之此舉立即遭到御史中丞的彈劾。
𨪜𨪜劉義隆一直賞識庾炳之，更何況現在正在重用他。因此，接了彈劾他的奏章，劉義隆就拖延著，想寬恕他。御史中丞見沒有動靜，就又上一奏章；劉義隆見捱不過，就召問尚書僕射何尚之。何尚之原本就對不學無術的庾炳之的為人非常厭惡，於是就借此機會詳盡陳述他的過失，隨後又密奏道：
𨪜𨪜「治國治家，何嘗不慎用前典。今若為一人亂法，恐非賢君治世之長術。炳之所作所為，並非偶然，臣所聞非一，又往往親見，事如丘山，朝野共見。若放縱不糾，不知將何以為治。晉武帝不算明主，而斷鬲縣令袁毅貪賄一事就不因人枉法。袁毅貪賄牽連南中郎將華廙，而晉武雖待華廙甚厚，但華廙仍遭禁錮十年。華廙在家教誨子孫講讀經書，又建豬圈於宅旁、種植苜蓿滿園，晉武雖憐憫他，但直到太康初大赦，他才得以襲父爵位，又過了數年晉武才起用他為城門校尉。若言炳之有功於國，未知所指何事。縱有微功，又何足以掩其大惡！又，賈充雖是晉之重臣，一旦處事有失，不聞有大罪，但諸臣進說，晉武則出其外任。而今陛下聖哲，反因炳之遲遲不決。炳之交結朋黨，構扇是非，實足傷風亂俗，諸惡紛紛過於范曄，所少只有作亂一事。伏願陛下深加三思，普訪群臣。群臣見陛下待炳之厚重，恐不敢嚴詞相犯。臣愚，既有所啟，欲盡臣心，若無可納，伏願陛下宥臣觸逆之罪。」
𨪜𨪜劉義隆為難了。這時庾炳之到太極殿向皇上申辯：「臣不諳典制。令史都說停宿在外無妨。」劉義隆就責備他聽信不當，但心中認為這只是小事，小事不足以傷害大臣——這是劉義隆一貫的態度。
𨪜𨪜何尚之不屈不撓，再次陳奏：
𨪜𨪜「炳之呼二令史出宿於外，令史錢泰向都令史駱宰詢問，駱宰答以『不可』。吏部曹皆知不可，於是錢泰回炳之說不得停宿於外，炳之置之不理。此非不諳典制，是違制擅留，內外盡知此，而炳之妄為己開脫，有欺君之罪！令史出宿於外，有虧朝典，不得謂之小事。晉時王珣雖是時賢，終因一時小失而白衣領職；先帝時，謝晦聲望，非今日炳之可比，但封南郡太守王華時誤封北海太守王球，免侍中職。何況炳之公然觸犯朝廷憲制！孔萬祀任尚書左丞之職，竟然對駱宰言：『炳之當今貴要，異於其他尚書』；炳之曾對屬下言：『不癡不聾，不成姑公。』敢出此言，又有何人！」姑公，即公婆。
𨪜𨪜劉義隆猶豫不決，就讓何尚之再申明其意，於是何尚之詳言庾炳之諸多過失：
𨪜𨪜「尚書省舊有增補差役二十人，炳之常取十人私家使用，而尚書處差役短缺，不能按時補缺；近時炳之已得差役，仍不放十人回，臣令人轉告不宜長期留用，這才放回。炳之為人大都任性而為，凡事紛紛，他人往往不得盡知。三國時，曹操俘獲關羽，雖賞識之，但猜測其無久留意，就讓張遼私下問關羽，關羽如實告訴張遼自己受劉備厚恩，終將投奔劉備。張遼想把關羽的話告訴曹操，則擔心曹操殺了關羽；若不說，則又非臣下事君之道。他左右為難，但最終醒悟：『和曹公，是君父關係；和關羽，是兄弟關係。』既辨明了輕重，他於是就如實稟告了曹操。今人能憂國者少，若臣也結舌不言，陛下日月之明，恐有所蔽。然而不知臣者，豈不以為臣有競爭之心？想來令人心傷。臣與炳之相交往，同受陛下恩遇，不宜又生厚薄。
𨪜𨪜「太尉昨日與臣言，說炳之有諸多不可，非只一二；朝野敬畏，震動四海。虞秀之以門生身份事之，珍饈美味，進獻不絕，其他貢獻，難以詳言；炳之與劉德願一向交惡，德願有精麗琵琶，以此相贈，炳之便與之相交甚厚；市令盛馥進獻數百口木材助炳之建豪宅，恐他人知，偽造買賣券；劉道錫以廣州所得之半，輸入庾府；劉雍因得炳之力助，事之如父，夏季送甘蔗，若新砍伐於州；國吏為庾府運輸柴草，絡繹於道。炳之見人有好物，便開口索要：聽說劉遵考有好木材，便索要木材；見遵考有好燭盤，便索要燭盤。炳之自從主持吏部以來，選用不公，不可一二。
𨪜𨪜「太尉又言：炳之毫無共事之體，凡所選舉，皆出己意，事後方讓太尉知曉。炳之以虞秀之作黃門，太尉堅持不可，才作罷。太尉近日與炳之短札，將以劉德願之子為州西曹，炳之卻啟用其為主簿，隨即告知德願，德願便謝絕太尉。炳之前後賣恩，何止於此！縱不加罪，也應出其外任。朝野憤疾炳之，豈止項羽四面楚歌而已！自從裴方明、劉真道被誅罰以來，諸將盡力百倍；今若能顯明法憲，陛下便可閒臥紫宮，垂拱而治！」
𨪜𨪜太尉即江夏王義恭；裴方明、劉真道因攻破氐帥楊難當後，私自佔有所獲的金銀珍寶，又私藏楊難當寶馬，同時下獄處死。
𨪜𨪜劉義隆見何尚之如此堅持，且庾炳之又有諸多不可，自己若再像過去那樣信任庾炳之，就是一種袒護，但他畢竟心慈，不想傷大臣。聽了何尚之說「縱不加罪，也應出其外任」，他覺得這是一個好的建議。外任何方？他立即想到了丹陽尹。丹陽尹，既是皇都所在地的地方官，地位顯赫，又可以算作是外任，但又不是真正的外任。這樣對何尚之和庾炳之兩方面，也都還能說得過去。
𨪜𨪜次日，劉義隆又派使者就此事咨訪何尚之。何尚之立即拿過筆來答旨：
𨪜𨪜「臣既乏賈誼應對之才，又缺汲黯犯顏之直。至於侍坐對答，常不能盡臣心意。近日夜臥深思，方知居官失職。陛下於炳之遲遲舊恩，不忍盡法，寬宏大量，莫過於此。於今又將授之以赫赫京尹，臣恐盡心奉國者，將三緘其口；貪贓枉法者，則與日俱增。非但污損皇化，乃治亂之所由。如臣所聞朝野議論，炳之常常塵累日月，未見一毫增輝。今曲阿（丹陽尹治所）近在秦淮河南岸，恩寵無異，又有天下郡之榮，反更增其威勢。古人言：『無賞罰，雖堯舜不能為治。』陛下豈可以損皇家之重，而迷惑於一凡人！炳之之事若在可否之間，臣亦不敢妄陳淺見。今之是非，明白皎然，而陛下聖明，反不醒悟，令賈誼、劉向重生今世，豈不慷慨流涕於聖世哉！臣昔啟奏范曄，當時也懼怕觸犯之罪，若臣心有所積，則自不能不陳奏，此所謂『雖九死其猶未悔』。臣以為炳之外出，若能改過，任職著稱，回京再任不難；既能稍明國典，又可答天下人之責。今炳之積惡如山，而榮任不改，若更有大罪，天下之人，誰敢再冒昧陳奏？況且若非奇功異績，又何以抵近日之過？歷觀古今，未有過惡如此，貪贓數百萬，而能依然高官厚祿者！臣每念聖治之中竟有此事，未嘗不痛心疾。若臣等步其後塵貪贓枉法，不知陛下又當如何處置！臣知陛下不能採納臣言。臣蒙受陛下恩澤不少，而獨懇懇於炳之之事，實是尊君樂治之意。伏願陛下垂察。」
𨪜𨪜在將這份奏折呈上之後，何尚之覺得言猶未盡，在下一天面見皇上時又作補充：
𨪜𨪜「臣數日前見劉伯龍，他對炳之所為也大感慨。他說有人為新上任的余姚縣令張幼緒送行，張幼緒卻說：『我雖得一縣，但出錢三十萬！』言指炳之。荀萬秋曾到庾府，遇到一夏侯姓客人，炳之問夏侯：『有好牛不？』夏侯答沒有；炳之又問：『有好馬不？』夏侯又答沒有，但隨即說：『只有一隻好驢。』炳之馬上說：『這正是我想要的！』客人出門後，炳之就跟著催問什麼時候把驢送來。有人曾經譏笑炳之是『東門得牛酒，西門變賣之』。廣州刺史劉道錫是炳之舉薦的，炳之後來就向他索要女兒陪嫁用品和祠堂祭器，那些東西價值百萬，炳之還嫌不足。選令史章龍也向臣感歎炳之貪受錢財之過，說炳之的確曾經從道錫處得到嫁女用品，其中銅爐要四個人才能抬得動，細布斗帳等物不計其數。在尚書省，炳之又令其家奴販賣酃酒，利潤數十倍。此皆至今聞所未聞之事。炳之所為，臣恐仰傷日月之明，所以私下每每為之歎息！」
𨪜𨪜庾炳之所為如此，與劉義隆持家治國方略大相逕庭，考慮再三，劉義隆這才批准了御史中丞彈劾庾炳之的奏章，免去了他的所有職務。
𨪜𨪜兩年之後，庾炳之病死家中。
𨪜𨪜