二叔殘殺兄弟、大殺諸元的行為，引起朝野震動，有傳言說這是皇帝為太子將來繼位掃除障礙。
堂弟太子高殷性格柔弱，受漢人母親和漢人老師的影響，舉止言行完全就是個漢兒，這讓二叔很是憂慮。
一次在金鳳台上，二叔命人帶來一個死囚，讓太子高殷斬殺，可是高殷揮刀砍了好多下也沒把死囚的頭砍下來，死囚疼得滿地打滾、嗷嗷直叫，氣得二叔拿起馬鞭擊打了太子三下，結果這三下就把太子打得從此口吃了。
高肅心想，這是否就是報應，當初二叔假裝口吃，如今他的兒子真成了口吃。二叔曾經堪稱英雄天子，兒子卻生性怯懦膽小，這樣的孩子怎能擔當皇帝大任，不要說六叔常山王，高家隨便一個叔叔或兄弟都比太子強，二叔真要想掃除障礙，只怕要把高家殺絕了，這根本不現實。就像一棵大樹，你把枝葉都砍沒了，只留光禿禿的主幹，這樹也是活不成的，沒有高氏諸王的輔助護衛，太子高殷就會被斛律金等鮮卑勛貴架空，總不能把他們也殺了吧，以後還靠誰對付西賊？
八月的一天，高肅正在軍中巡營，突然宮中來使傳皇帝口諭，急召高肅進宮，以前也有急召的情況，高肅沒有在意，跟著內使進宮，來到昭陽殿，看到殿內除了二叔，還有尚書令楊愔，見二叔滿臉怒容、一身濃烈的酒味，高肅頓時有種不好的預感。
高肅跪下行禮，高洋道：「你和鄭氏和離的事，為什麼瞞著朕，不跟朕說？」
高肅心驚，高德政應該還沒和二叔說，這事倒先傳到二叔耳里了，看了一眼旁邊的楊愔，料想又是這漢兒在皇帝面前放自己的壞水，作手勢示意想要紙筆，然而二叔並不給他解釋的機會。
高洋道：「鄭氏沒有過錯，朕不同意你們和離，你不喜歡她，可以納妾，朕宮中的女子，但有你中意的，就跟朕說，你馬上把鄭氏接回家。」
高肅心想，這怎麼行，好不容易才讓她簽了字，接回家就前功盡棄了，那還報不報仇了？
高肅搖了搖頭，叩首在地。
高洋大怒，抬腿一腳踹翻了高肅，氣道：「朕的話敢不聽了？朕是怎麼告誡你的？朕再問你一次，去不去接鄭氏回家？」
高肅從地上爬起，重新跪好，仍是叩首在地。
「朕知道了，你根本就是不滿意朕的賜婚，是不是？」高洋伸手道：「拿馬鞭來！」
楊愔在旁道：「樂城公，就聽陛下的話吧！」
高肅瞪了他一眼，心想不要貓哭耗子假慈悲，挑事的就是你，這會心裡一定樂開花了吧！
但是苦於不能開口辯解，只能叩首請求皇帝的原諒。
然而二叔的馬鞭已經毫不留情地抽在自己背上，痛得要命，高肅只能忍著，希望二叔發泄之後能夠同意自己與鄭氏和離。
不知挨了多少鞭，高肅被打到趴在地上，直到馬鞭都打斷了，高洋仍不解恨，對劉桃枝道：「拿大杖來！」