又道：“事在陛下，臣何必多言。”說畢自退。
會晉王廣出鎮揚州，甫經半載，便表請入覲，有旨允准。廣即入覲父母，語言容止，無不加謹；就是接待朝臣，亦格外謙恭。宮廷內外，有口皆碑。及辭行還鎮，併入宮別母，敘談半日，無非是遠離膝下、常懷孺慕的套話。待到天色將晚，將要出宮，又故意裝出欲去不去的光景，欲言不言的情狀。獨孤後未免動疑，便問他有甚言語？廣請屏去左右，只剩得母子兩人，便伏地泣訴道：“臣兒愚蠢，不知忌諱，每念親恩難報，所以上表請朝，不知東宮何意，怒及臣兒，謂臣兒覬覦名器，欲加屠陷，臣兒遠到外藩，東宮日侍朝夕，倘若讒言交入，天高難辯，或賜三尺帛，或給一杯鴆，臣兒不知死所，恐未能再覲慈顏了。”好一張似簧利口。說至此，嗚咽不止。獨孤後且憐且恨道：“睍地伐見上。真令人難耐，我為他娶元氏女，向無疾病，忽然一旦暴亡，他卻與阿雲等日夕淫樂，生了許多豚犬。我長媳遇毒喪生，我尚未曾窮治，他竟又想害汝，我在尚然，我死後，汝等只合配他做魚肉了。況東宮今無嫡妃，至尊萬歲千秋後，汝等兄弟，且向阿雲前再拜問候，這不是更加苦痛麼？”說著，亦泫然泣下。廣又假意勸慰，說是：“臣兒不肖，轉累慈聖傷心，更增罪戾。”云云。一擒一縱，獨孤雖狡，怎能不墮入彀中？獨孤後又咬牙密諭道：“汝儘管放心還鎮，我自有區處，不使我兒屈死。”廣聞言暗喜，面上尚帶著慘容，再拜而去。
獨孤後遂決意廢立，屢在隋主面前，挑唆是非。隋主因令選東宮衛士，入臺宿衛。朝臣無人敢諫，獨高熲入奏道：“東宮宿衛，不便多調。”隋主不待說畢，便作色道：“朕有時出巡，衛士應求雄毅，太子毓德東宮，何須壯士？我熟見前朝舊事，公不必再循覆轍了。”這一席話，說得高熲面有慚色，只好退出。原來熲子表仁，曾娶太子勇女為婦，隋主言中寓意，越令高熲難以為情。既而熲妻病卒，獨孤後乘間進言道：“高僕射年已將老，驟致悼亡，陛下奈何不為熲娶？”隋主因召熲入闕，面述後言。熲含淚答道：“臣今已老，退朝後惟齋居誦經，不願再納繼室了。”隋主亦為悼嘆，因即罷議。過了數月，熲親生下一男。隋主頗為熲喜慰，惟獨孤後很是不樂。隋主問為何因？後答道：“陛下尚再信高熲麼？前陛下欲為熲續娶，熲心存愛妾，面欺陛下，今詐情已見，怎能再信？”看到此語，方知前時勸熲復娶，已寓陰謀。隋主亦以為然。及與熲商廢立事，熲又提出長幼倫序，對答隋主，見上。於是隋主益疑熲有私，擬加譴謫。復憶及王世積一案，再加複驗。有司希旨鍛鍊，謂熲實有通叛情事，乃即罷隋左僕射，以公爵就第。
先是漢王諒東伐高麗，嘗令熲為長史，面加重託。諒年少任氣，與熲言多不合意，遂致無功而歸。諒入見獨孤後道：“兒倖免為高熲所殺。”獨孤後原記在心中，諒亦懷恨不休，常欲置熲死地。還有晉王廣為張麗華事，又挾嫌伺熲，為此種種積仇，遂陰唆熲吏上書，訐熲私事，誣稱熲子表仁，勸慰乃父，謂：“司馬仲達，嘗託疾不朝，卒有天下，父今遇此，安知非福”等語。隋主得書大怒，遂拘熲至內史省，備加訊鞫。法司按不得實，反捏報他事，謂：“沙門真覺，曾語熲雲，明年國有大喪，尼令暉亦與熲言，皇帝將有大厄，十九年恐不可過。”隋主益怒，顧語群臣道：“帝王豈可力求？孔子為古來大聖人，作法垂世，豈不欲有天下？但天命未歸，只好作罷了。”孔子豈肯效法篡逆麼？有司請即誅熲，隋主復嘆道：“去年殺虞慶則，今年斬王世積，若更誅熲，天下總道我殘害功臣了。”乃褫熲爵邑，除名為民。熲有老母，嘗誡熲道：“汝富貴已極，但欠一斫頭呢，奈何不慎？”熲既被黜，回憶母言，尚自幸不死，倒也沒有恨色。哪知生死有命，後來終難免一刀，這且慢表。
且說晉王廣聞高熲免官，又少了一個對頭，自思儲君一席，此時不奪，更待何時？但一時也想不出妙計，默思安州總管宇文述，足智多謀，何不將他奏調過來，好與他秘密商量。當下寫定一表，奏調宇文述為壽州刺史。隋主怎識秘謀，便即批准。述受調南來，順道謁廣。廣殷勤款待，向述問計。述答道：“皇太子失愛已久，令德仁聞，無一可及大王，將來入承正統，舍王為誰？但廢立大事，實不易言，大王雖經二聖寵愛，究竟事關重大，未便遽移，必須有一親信大臣，從中慫恿，方可成功。”廣皺眉道：“親信大臣，莫如楊素，但恐他不肯助我，奈何？”述介面道：“這也何難？大理少卿楊約，為楊僕射親弟，事必與謀，述與約相識，願入朝京師，乘便語約，為大王效勞，何如？”廣大喜過望，便