Den 10. mai 1911 gikk Kelly opp alene til sin pilotkvalifisering. Flyet hadde nesten havarert en uke tidligere med Walker ved rattet, og Beck hadde ødelagt det på en testflyvning senere. Etter fem minutter i luften kom Kelly inn for landing i hva som syntes å være for stor fart, og klarte ikke å flate ut i tide. Forhjulet på flyet traff bakken og brakk gaffelen til rattet. Med kurs for infanteriets teltleier, klarte Kelly å trekke opp for å gjøre et nytt forsøk på landing. Denne gangen kom flyet ut av kontroll, havarerte og kastet Kelly 100 meter ut av flyet.