Усков является воспитанником московского клуба ФШМ. В нём он и дебютировал в футбольной Второй лиге СССР. Впоследствии он играл за смоленскую «Искру», тульский «Арсенал», могилёвский «Днепр» и курский «Авангард». В 1989 году Алексей перешёл в алданский «Металлург». В 1991 году в составе алданского клуба он принял участие в первом чемпионате СССР по мини-футболу и выиграл серебряные медали. После этого Усков принял решение о переходе в мини-футбол.
В 1993 году Алексей перешёл в московский «Минкас». Именно в столичном клубе он провёл наиболее значимый отрезок своей карьеры, помимо серебряных и бронзовых медалей чемпионата России выиграв Кубок России и Кубок Высшей лиги. В 1999 году Усков перешёл в ЦСКА, в котором в 2001 году и завершил игровую карьеру.
Усков сыграл 12 матчей и забил 2 мяча за сборную России по мини-футболу. В её составе он поехал на чемпионат мира 1996 года, где стал обладателем бронзовых наград.
После окончания игровой карьеры Усков четыре года работал в тренерском штабе ЦСКА, затем работал в «Норильском никеле» и «Спартак-Щёлково». В 2010 году вновь работает в Норильске, возглавляя дубль команды.