Воспитанник юношеской команды «Металлург» Москва. Армейскую службу проходил в команде минского окружного Дома офицеров, а в 1951 году был переведён в ЦДСА. Через год команду расформировали, и Рыжкина перевели в Калинин, где базировался спортивный штаб Московского военного округа. После расформирования команды МВО Рыжкин перешёл в московское «Динамо» и отыграл в команде 9 сезонов, завоевав шесть медалей чемпионата СССР — три золотые, две серебряные и одну бронзовую и выиграв в 1953 году Кубок СССР.
За сборную СССР провёл 4 неофициальных матча в 1954 году против Болгарии и Польши, 5 официальных матчей в 1956—1957, в том числе три — в составе олимпийской сборной.
После окончания спортивной карьеры работал дипломатическим курьером. Скончался 19 мая 2011.