后来，杨勇又娶了几个女子：
云昭训：云定兴的女儿。
高良娣：高颎的女儿。
王良媛：背景不详。
成姬：背景不详。
这几个人中，就数云昭训肤白貌美，妩媚动人，杨勇几乎把所有心思都花在了她身上。元氏身为正妻，却惨遭丈夫的无视，还让小妾欺压到自己的头上，一气之下竟然生了病，最后含恨而终。
元氏去世之后，杨勇变得更加肆无忌惮。在杨勇的努力下，云昭训怀了身孕，并生下了长子杨俨。没过多久，杨勇便将后院之事交给云昭训打理，让她享受着太子妃的权力。
也算是云昭训争气，随后又给杨勇生下了杨裕、杨筠两个儿子。与此同时，高良娣也生下了杨嶷（nì）、杨恪。王良媛生下杨该、杨韶。成姬生下杨煚（jiǒng）。
对独孤皇后来说，太子府添了那么多男丁，应该要来个普天同庆吧？有趣的是，独孤皇后非但没有引以为傲，反而是烦闷不已。在她的眼里，杨勇对元氏爱答不理，这明显是挑战她的权威，和她为敌啊。自此以后，独孤皇后对杨勇的态度开始转变。
据说，母子只要见面，独孤皇后总是训斥杨勇，话里话外，全都透露着对他的强烈不满，甚至怀疑元氏是杨勇故意整死的。
杨勇呢，受到训斥之后，从来不为自己辩解，一副无所谓的样子。回到太子府后，杨勇继续扎在女人堆里寻欢作乐，以至有个不知名的宫女又给他生下了杨孝实、杨孝范两位王子。