Людвиг Римлянин — первый сын от второго брака императора Священной Римской империи Людвига IV с Маргаритой Голландской. Он отказался от нидерландского наследства по материнской линии в пользу своих младших братьев Вильгельма и Альбрехта, поскольку, женившись на дочери короля Польши Казимира III, надеялся взойти на польский престол.
При разделе герцогства между братьями по Ландсбергскому договору 1349 года он вместе с Людвигом и Оттоном получил Верхнюю Баварию. Свои доли наследства он и Оттон в декабре 1351 года обменяли у Людвига V по Луккаускому договору на Бранденбургскую и Лужицкую марки. В Бранденбурге Людвиг вынудил Лжевальдемара отказаться от власти в Бранденбурге, но попал в долги и был вынужден заложить часть территории марки.
В 1356 году по золотой булле императора Карла IV получил титул курфюрста Бранденбурга.