高洋一生荒淫无道，一辈子只尊重一个女人，那就是他的元配妻子李祖娥。李祖娥出身名门，在他还只是一个太原公的时候就嫁给了他。高洋当上皇帝之后，高家宗室大臣高德正考虑到政治利益，希望高洋能立战功显赫的武威王段荣之女段昭仪为皇后。段昭仪的母亲正是娄太后的姐妹，因此这一建议得到了很多人的拥护。但是，高洋排除一切阻力，坚决立李祖娥为皇后，对她无比疼爱，但是对其他女人就无所顾忌了。
高洋有一个姓薛的宠妃，原是他叔父高岳家的歌伎，因长得漂亮被高洋相中，纳为妃子。因为薛氏的原因，不久高洋又看上了薛氏的姐姐，和她有了私情。薛氏的姐姐仗着高洋对自己的宠爱，要求高洋让自己的父亲当上司徒。本来还沉浸在温柔乡里的高洋突然发怒，说：“司徒是朝中的重要官职，哪是你想求便能求到的?”说完便亲自动手用锯子将她锯死。
之后，高洋又怀疑薛氏和高岳之间不清白，便用毒酒毒死了高岳，接着又砍下薛氏的头，并将其藏在怀中带着去赴宴。宴会举行到一半，他突然从怀中拿出了薛氏的人头，在座的人个个吓得面如土色。看到这种效果，高洋很是满意，又若无其事地命人将薛氏的遗体抬来，当众肢解，并取出髀骨制成一把琵琶。琵琶制好后，他还一边弹奏，一边哭泣着说：“佳人难再得。”之后，他又用隆重的嫔妃之礼葬了薛氏。出殡那日，高洋跟在送葬队伍后面号啕大哭。
高洋的哥哥高澄的妻子冯翊公主元氏(孝静帝的妹妹)长得很漂亮，高澄死后，高洋想起高澄欺负李祖娥的事情，于是毫不留情地奸污了嫂子。高洋父亲的小妾尔朱英娥长得貌美，高洋也想霸占她，怎奈尔朱英娥抵死不从，高洋一气之下一刀杀死了庶母。
高洋未称帝之前，由于高家地位显赫，不少元氏妇女都嫁给了高氏。高洋称帝后，杀完了元氏男性宗室后，连高家的元氏妇女都不放过，或杀或奸。
高洋还经常往大臣家中跑，看到美貌的女子便强行占有，吓得满朝文武大臣都不敢私蓄美女在家中，一有美人立即往皇宫里送。
皇后李祖娥的姐姐李祖猗长得十分艳丽，她的丈夫是魏亲王元昂。高洋一直对她存有非分之想，经常借口到元昂家喝酒，之后借酒装疯，故意吐得满身都是，让李祖猗为他擦拭。元昂和李祖猗很生气，却又没办法。而高洋竟然也因为自己没有如愿而生气，于是干脆找了个借口将元昂骗进宫中用乱箭射死，后来还在他的灵堂之上强暴了李祖猗。
高洋将李祖猗强行带回宫中，准备封为昭仪。李祖娥听说以后开始绝食。这件事惊动了娄太后，由于她的干预，高洋才答应将李祖猗送离皇宫。
高洋一生荒淫无道，嗜酒成疾，于天保十年(559)十月病殁，时年31岁，发丧时“群臣号哭，无下泣者”。高洋死后，他的弟弟也像他一样，不仅杀了他的儿子，还不肯放过他的皇后李祖娥，就像他当初不肯放过哥哥高澄的妻子元氏一样。
高洋从一个英明神武的开国君主迅速堕落成一个荒淫无道的杀人魔鬼，其一生令人可悲可叹。