莫非赵家无人了吗？”无恤与智瑶对视，毫不相让，说道：“家父挑中了我，是因为我能隐忍！”
智瑶狂笑：“忍给我看！”说罢甩脱手中酒杯，直向无恤脸上掷来。无恤就坐在智瑶旁边的一席，这么短的距离根本来不及躲闪，额头给酒杯砸个正着。鲜血流过无恤的眼睛，顺着脸颊淌了下来。赵家众家臣看不下去，纷纷拔剑要杀智瑶。智氏家臣也一个个拔刀相向，气氛立时如箭在弦，一触即发。
智瑶冷冷看向无恤，等着他的反应。无恤这时从怀里抽出一片帛，将脸上的血拭去，转身对众家臣说：“给我退下！”语气中有种不容置疑的味道。众人只得收剑回鞘，退回原来的地方站好，智氏众人见此也只好纷纷归位。
看着无恤拿着帛布稳稳扶着额头的样子，看着他毫无表情的脸，智瑶心里没来由地一紧。但这种感觉转瞬即逝，他也就没有放在心上。
回到赵家后，众人问无恤为何不让他们出手，为他雪耻报仇。无恤说：“小不忍则乱大谋，家父之所以选我为继承人，就是因为我能够忍辱负重。把眼光放长远一点吧，我们现在不是智氏的对手。”当然，在无恤心里，智瑶与他已是你死我活之局。
闹过酒后的智瑶还曾向赵鞅建议，让他把无恤给废了。赵鞅费尽心思，千挑万选才把这个宝贝儿子选出来，当然不会听他的话。不过这事最终让无恤给知道了，无恤也因此更加仇视智瑶。
不久赵鞅病故，无恤成为赵氏家主。