1905 m. - 1907 m. Britanijos nacionalinis dviračių sporto čempionas.
Londone vykusiose ketvirtose moderniose 1908 m. vasaros olimpinėse žaidynėse Kingsbury dalyvavo dviračių treko varžybose. Vyrų individualaus sprinto varžybose britas dalyvavo finale, bet medalio nepelnė nes visi finalo dalyviai netilpo į nustatytą laiko limitą. Vyrų 5000 m varžybose į finalą nepateko. Vyrų komandinėse persekiojimo lenktynėse kartu su Jungtinės Karalystės nacionaline rinktine finale nugalėjo Vokietijos rinktinę ir tapo olimpiniais čempionais.