К.фон Фишер начал изучать архитектуру в 1796 году, затем 3 года учился зодчеству в Вене. В 1808 году становится профессором архитектуры, первым профессором архитектуры мюнхенской Академии изящных искусств. Подавляющее большинство (а именно 36) построек, возведённых архитектором, погибли от бомбардировок в годы Второй мировой войны или были разрушены — как, например, был разрушен нацистами и дом самого К.фон Фишера, на месте которого был построен «Храм Славы» НСДАП.
Из сохранившихся следует назвать здание мюнхенского Национального театра, находящиеся также в Мюнхене дворец принца Карла и больницу у Зендлингских ворот.
К.фон Фишер умер от рака лёгких, вызванного туберкулёзом.