Родился в Бускеруде. В 1949 г. закончил архитектурную школу в Осло. Через несколько лет отправился в Марокко, где изучал примитивные жилища. После этого Фен учился в Париже у Жана Пруве. Во Франции молодой архитектор познакомился с Ле Корбюзье и, по возвращении в Норвегию, основал архитектурное бюро, намереваясь работать в интернациональном стиле.
В 1955 г. Фен с другим выпускником ословской школы Г. Грунгом построил дом престарелых "Ёкерн". Удачное сочетание дерева и бетона произвело впечатление на критиков, и в 1958 г. архитектору поручили строительство павильона скандинавских стран на всемирной выставке в Брюсселе. К этому времени он перешёл к более традиционным формам, и деревянное строение удивило иностранцев простотой и изяществом.
Будучи метром норвежской архитектуры и дизайна, Фен создал десятки проектов, многие из которых остались нереализованными. Одной из самых известных его работ стал Норвежский музей ледников в деревне Фьёрланд. Считается, что это здание, несмотря на использование современных конструкций, гармонично сочетается с окружающей природой. Другое творение Фена - музей Хедмарка в Хамаре - отражает национальный характер и менталитет норвежцев.