兩人都能和劉子業相處。
劉子業曾以木槽盛飯，再放進各種雜食，攪和拌合，又在地上挖一個坑，裝滿了泥水，把劉彧衣服脫光，放進坑內，把盛雜食的木槽放在他面前，命令他像畜牲一樣地用嘴去槽中吃食，以此歡笑取樂。劉子業也不是沒起過殺心，他十幾次想殺劉彧及劉休仁、劉休佑，虧得劉休仁頗有心機，能忍常人之所不能，常常戲諺巧言、阿諛奉承逗樂，劉子業哈哈一笑，覺得留著他們耍弄倒也不錯，這般殺了，實在可惜，是以這幾位逃過一劫。
其中有一次，當時廷尉劉蒙的妾懷孕，劉子業在她臨產時接進後宮，希望她生個男孩，打算立為太子——至於為什麼這麼做，史書未曾明載，不過鑑於劉子業素來有姦淫大臣妻女的習慣，還可猜度一二。劉彧曾違背其旨，劉子業大怒，於是便剝了他的衣服，捆了他的手腳，用棍杖從手腳內穿過，派人抬著交付太官，曰：“即日殺豬。”劉休仁便笑道：“豬今日不該死。”劉子業問是何原因，劉休仁道：“等皇太子生下來，再殺豬取它的肝肺吃。”劉子業一樂，沒了殺心，便將其交給廷尉，過了一夜就放出來了。
不過殺人不死，終歸埋下隱患，景和元年十一月，湘東王劉彧與親信阮佃夫、王道隆、李道兒，暗地與劉子業的親信壽寂之、姜產之等十一人聯絡謀劃共同廢掉劉子業。
當時已經是內外不穩，前朝重臣柳元景、沈慶之等人都先後被殺的，又將宗室諸王軟禁，如家畜一般豢養以之取樂，朝中人心浮動。而地方上，劉子業的弟弟劉子勳鎮守尋陽，尋陽的文臣武將們都擁立劉子勳，起兵造反，各地州郡紛紛響應。
阮佃夫是劉彧的主衣，自然乃是他的親信，一心想宰了劉子業，讓自己主子脫離苦海，也能搏一個前程。而壽寂之則是劉子業的主衣，曾經很是受寵，不過劉子業向來好猜忌，那會兒已經很是厭惡他，壽寂之每每憂懼，生怕哪天就被宰了，阮佃夫一找上他，兩人一拍即合。
劉子業喜歡讓宮女們在華林園竹林堂裸身追逐，有宮女不聽命令，被劉子業當場給斬了。當晚他就夢見有一名女人罵他：“皇帝昏虐無道，就要完蛋了！”劉子業自然害怕，便在宮中到處尋找，拖出了一個長得很像夢中人的宮女，又給殺了。可是噩夢還沒結束，那個被殺的宮女也跑到了他夢裡，罵了一番，大意便是：我已經向天帝告狀了，你等著吧，我這就叫人收拾你。劉子業夜不能寐，找巫師來問詢，巫師便稱說竹林堂內有鬼。還被說，這劉子業膽氣也真是壯，或許是少年登基，一路隨心所欲，要殺誰便殺誰，給他帶來了莫可名狀的強大自信心，一聽這個，頓時興奮了，竟然決定親自到華林園竹林堂射鬼。晚上他一個人睡著了，自然是怕鬼的，但人多勢眾的時候，便是不怕了。
特意選了一天傍晚，劉子業領著建安王劉休仁、山陽王劉休祐、會稽公主等隨侍他左右，跟著去竹林“射鬼”。
劉子業在竹林堂中大擺筵席，與他的親姑姑，本來姓劉，後來被他納進宮中改姓了謝的謝娘娘謝英媚、他的親姐姐山陰公主劉楚玉，一同入席歡飲，宮女們四下奏樂，好不開懷。忽有一群人持刀直入，劉子業料知有變，慌忙引弓搭箭，向來人射去，偏偏一箭落空。劉子業向後奔逃，且走且呼，口中叫了數聲，被一刀刺入背中，再一刀斷送性命。
宰了劉子業之後，沒多久，湘東王劉彧登基，不過這位被侄兒差點兒給玩殘的豬王也不是什麼好東西，殺了不少兄弟，還寵信佞臣。
之所以弄這麼兩句切口，則是為了表達對董卓和劉子業的敬仰感謝之意。
這兩位雖然在歷史上風評都是極差，但對於盜墓四門來說，卻是相當重要，必須感謝的兩位人物。
董卓當年招募盜墓四門眾人，大肆挖掘各地大墓，讓盜墓四門眾人終於能暴露在陽光下，堂堂正正，肆無忌憚的行事，那一段時間，他們在董卓的庇護下，可謂是想挖誰的就挖誰的，也不用擔心官府的追捕，日子過得真真是爽快舒心，可算得上是黃金歲月了。而且當時還沒有盜墓四門的說法，都是分散各地的，相互之間的聯絡也不算多，可說是各自有各自的傳承，沒什麼往來，盜墓四門也沒成型，壓根兒沒這個說法。正是在董卓麾下效力的那段時間，他們相互切磋，各自取長補短，都是大有長進，也促成了日後盜墓四門的形成。
而後來的劉子業，則是真正第一個史書有載的設立了發丘中郎將這個官職，或許這位荒誕皇帝只是因為好奇而隨手頒佈了這麼一道命令，但是對於盜墓四門的人來說，這是他們被朝廷承認的象徵。