Akan tetapi, ia tidak dapat menuntut haknya atas Lorraine, dan sebagai akibatnya ia dipecat dari jabatannya. Ia berencana untuk membunuh Otto pada Hari Paskah tahun 941 di Quedlinburg, tetapi rencana tersebut dapat digagalkan dan ia ditangkap di Ingelheim. Ia dibebaskan setelah menebus dosa pada Hari Raya Natal pada tahun itu. Pada tahun 948 ia meminta wilayah keadipatian dari Bayern melalui pernikahannya dengan wanita bangsawan Judith. Ia semula mempertahankan dan kemudian memperluas wilayahnya dengan berperang melawan Hungaria, dan melalui akuisisi Friuli di Italia. Sebagai mak comblang untuk adiknya ia membawa Santa Adélaïde ke Pavia pada tahun 951. Pada tahun 953–954 ia memadamkan pemberontakan Liudolf dari Swabia dan Konrad dari Lorraine, dan meninggal pada tahun 955 di Biara Pöhlde. Putranya adalah Heinrich II dari Bayern. Ia dimakamkan di Niedermünster, Regensburg, di mana istrinya Judith juga dimakamkan.