天高皇帝远，在太原，李元吉就是老大，更加骄横奢侈，府上奴客婢妾多达数百人。每日不理政务。吃饱喝足，即耍开游戏，让家奴、门客、姬妾，披甲执仗，在元帅府内相互追击，有时弄得死伤多人，连他自己也受伤。更有甚者，他经常与宫内监窦诞一起带领军士游猎，放鹰纵犬，践踏田禾，放纵部下抢夺民财。堂堂王爷，有时好为小偷小摸，换上便服，夜入民宅，淫乱民家妇女。又常常骑马在闹市上奔驰，以箭射人，以观看百姓避箭为乐。百姓怨恨，将其视为太原一害。其乳母陈善意看不过，说他：　　

    

    “白日不习文练武，身为王爷，糟踏百姓，实乃可恨，可叹！”李元吉恰逢酒醉，闻言大怒，命军士拉死乳母。为掩盖丑行，又私谥陈善意为“慈训夫人”，修墓立碑宣扬了一番。　　

    

    李渊知李元吉办事不牢靠，派右卫将军宇文歆前往晋阳，以协理防务。　　

    

    武德二年（６１９年）九月，裴寂驰援太原失败后，宋金刚占据了晋州以北府郡，并逐渐向太原周围运动。齐王李元吉吓得心惊肉跳，龟缩在城中不敢出战。九月十六日，离裴寂度索原之败仅仅四天，李元吉找来司马刘德威，强作镇静地对他说：　　

    

    “太原眼看被围，不主动出击是不行了。今夜，吾以强兵出战，夜袭敌军，卿以老弱守城，勉之！”　　

    

    刘德威弄不清李元吉的作战意图，却又不敢多问，只得应承下来。入夜，李元吉让妻妾换上军服，带上金银细软，杂在队伍中，悄悄出城，而后一气跑到了长安。　　

    

    李元吉刚走，宋金刚的前哨人马即兵逼城下，城中老弱兵不堪防守，晋阳土豪薛深向刘武周献城投降。　　

    

    李元吉盔歪甲斜回到长安，李渊惊骇不已，说道：　　

    

    “晋阳强兵数万，食粮可支十年，兴王之基，竟一旦弃之！”李元吉低头垂手不吱声。望着连续奔跑二天三夜，瘦了整整一圈的小儿子，李渊心疼不已。转而大怒道：　　

    

    “元吉幼弱，不精熟时事，故遣窦诞、宇文歆辅佐。今弃城逃回，肯定是宇文歆的主意，朕定当斩之！”