576年2月12日，宇文邕派太子宇文赟巡视西部疆土，顺便向吐谷浑发动攻击，大将军王轨和太子宫总管宇文孝伯随从同行，军事调度指挥由二人全权负责。
宇文赟在西征途中，有许多败坏德行的行为，太子宫副总管郑译都有参与，班师回国后，王轨报告宇文邕，宇文邕大怒，用军棍责打宇文赟及郑译，并免除郑译的官职，太子宫的其他弄臣和家奴全受处罚。
但没过多久，宇文赟又把郑译找回来，待他更加优厚。
宇文邕没有穷追不放，但此后对宇文赟更加严厉，金銮殿上朝见的仪式，宇文赟不能享受任何特权，与其他官员保持一致，不管寒冬还是盛夏，都不能迟到早退，宇文邕还特别交待东宫官员，让他们把宇文赟的一言一语一举一动全都记录下来，每月奏报。
宇文赟喜欢喝酒，宇文邕下令一滴酒都不准进入太子宫，有时宇文赟偷酒喝，宇文邕一经发现，立即对他鞭抽棍打。
宇文邕经常警告宇文赟：“从古至今，许多太子都被废黜过，其他儿子难道就不配当太子？”
王轨对宇文赟颇有成见，私下对教育部秘书官员贺若弼说：“我看太子无法承担重任。”
贺若弼亦有同感，劝王轨奏报宇文邕，王轨于是当面向宇文邕陈述：“皇太子在仁慈孝顺方面，没有好的名声，恐怕不能接管陛下的家事，我见识愚昧，眼光短浅，说的话陛下或许不太相信，但陛下一直认为贺若弼是个奇才，他也一直为此事忧虑。”
宇文邕便问同行的贺若弼，贺若弼却说：“太子在东宫修养品德，我从来没听过有什么过失。”
宇文邕点头不语，示意二人退出。
王轨出来埋怨贺若弼：“我们之间无话不谈，今天面对皇上，怎么可以如此反复？”
贺若弼说：“这就是你的不对了，皇太子是帝国储君，怎么可以轻易讨论，事情万一有变，全族都会被杀，本来我认为你会秘密提及此事，怎么能当着这么多人的面，公开启奏！”
王轨沉默良久，渐渐回过味来，后怕不已，叹息道：“我一心一意尽忠国家，竟没有为自己打算，刚才在大家面前发言，实在不合时宜。”
贺若弼是贺若敦的儿子，贺若敦当年自恃才能，不肯向人低头，看到一帮平起平坐的朋友都当了大将军，而只有自己什么都不是，再加上对南朝用兵失利，虽然把远征军安全带回，却仍受重罚，所以对中央委派的使节口出怨言，当时把控朝政的宇文护唯恐发生变故，征召贺