荣乃大相嫌责。曾关补定州曲阳县令，神俊以阶悬不奏，别更拟人，荣大怒，即遣其所补者，往夺其任。荣使入京，虽复微蔑，朝贵见之，莫不倾靡。及至阙下，未得通奏，恃荣威势，至乃忿怒。神俊遂上表逊位。荣欲用其从弟世隆摄选，世隆时为尚书左仆射。上亦不违。荣曾启北人为河内诸州，欲为犄角势，上不即从。
元天穆入见论事，上犹未许。天穆曰：“天柱有大功，为国宰相。若请普代天下官属，恐陛下亦不得违。如何启数人为州，便停不用？”
帝正色曰：“天柱若不为人臣，朕亦须代；如犹存臣节，无代天下百官理。”
荣闻，大怒，曰：“天子由谁得立？今乃不用我语。”皇后复嫌内妃嫔，甚有妒恨之事。帝遣世隆语以大理。后曰：“天子由我家置立，今便如此。我父本即自作，今亦复决。”世隆曰：“兄止自不为。若本自作，臣今亦得封王。”
荣见帝年长明晤，为众所归，欲移自近，皆使由己。每因醉云：“入将天子拜谒金陵，后还复恒、朔”；而侍中朱元龙，辄从尚书索大和中迁京故事；于是复有移都消息。荣乃暂来向京，言看皇后娩难。帝惩河阴之事，终恐难保，乃与城阳王徽，侍中杨侃、李彧，尚书右仆射元罗谋。皆劝帝刺杀之。惟胶东侯李侃晞、济阴王晖业言：荣若来，必有备，恐不可图。李彧，庄帝舅延寔之子。尚帝姊丰亭公主。任侠交游。尔朱荣之死，武毅之士，皆彧所进。孝静初被杀。延寔为青州刺史，尔朱兆入洛，亦见害。侃晞，凤之孙。与鲁安等同杀荣。后奔梁。皆见《魏书·外戚传》。又欲杀其党与，发兵拒之。帝疑未定。而京师人怀忧惧。中书侍郎邢子才之徒，已避之东出。