Сын Георга II Вальдек-Пирмонтского и его жены Эммы Ангальт-Бернбург-Шомбургской. После смерти отца в 1845 году наследовал ему как князь под регентством своей матери.
В первый раз он женился 26 сентября 1853 года на Елене-Вильгельмине Нассауской (1831—1888), дочери Вильгельма, герцога Нассау и Паулины Вюртембергской. У них было семь детей:
Второй раз он женился 29 апреля 1891 года на Луизе Шлезвиг-Зондербург-Глюксбург. От этого брака он имел одного сына, умершего в Первой мировой войне:
Георг Виктор умер от пневмонии 12 мая 1893 года в Мариенбаде, Богемия.