Den andra bomben, som föll för 70 år sedan under andra världskriget, träffade hans far, Ernest Hursey, som då ansvarade för säkerheten på Rotherwas fabrik.
Herr Hursey sa att det var "öde" han var på baksidan av huset i början av tiden eftersom familjen hade besökare och de främre sovrummen togs.
Han sade: " Även om [tiden] har läkt, har den inte riktigt stoppat bilden av flygplanet som kommer över och släpper sina bomber.
"Det som finns i bomben studsade ut ur fabriksområdet längs marken in i vårt hus... Det kommer alltid att förbli mycket framträdande i mitt sinne."
Tusentals kvinnor arbetade på Royal Ordnance Factory under de två världskrigen, säger Herefordshire Lore, som publicerar lokala minnen i ett nyhetsbrev och online.
Man trodde att 17 personer dog i fabriken i händelsen den 27 juli 1942, tillade gruppen.
Herr Hursey sade: "Omkring klockan 6 på morgonen - en underbar solig morgon, vacker - och sirenerna gick och naturligtvis i Hereford ingen tog någon notis om sirenerna.
"Jag såg att bomberna var öppna och att två bomber föll ut.
"En landade mitt i en rad skjul och exploderade och den andra gick in i den sista skjulet närmast vårt hus, som förmodligen var cirka 200, 300 meter bort."
Mr Hursey sa att han inte visste om han slogs medvetslös, men "över en tidsperiod var allt så tyst".
Han tillade: "Jag kunde inte förstå varför [det var] inget oväsen, ingenting hände och sedan till slut hörde jag någon springa längs vägen och ropa 'Finns det någon där?'
"De kom och grävde undan för undan ut mig ur allt skräp."
Hans far Ernest och franska mor Bertha - båda i slutet av 50-talet - dog tillsammans med sin 22-åriga bror Ron, som var permission från armén, och hans bror Ernests fru och svärmor.
Ernest junior, en RAF pilot, dödades i strid i mitten av 20-årsåldern ungefär ett år efter Rother var tragedi.
Familjens hus revs efter fabrikens incident, men Ken Hursey - yngste bror - "hade bara ett par små repor".
Efter bombningen bodde lärlingen elektrikern, som hade slutat skolan vid 14 års ålder, hos sin farbror, Bob Hursey, och hans hustru innan han senare anslöt sig till Fleet Air Arm och polisen 1949.
Ken Hursey, som nu är 86 år, har varit gift med Margaret i 67 år och har tre barn och fyra barnbarn.
Men han minns tydligt sina "stora" föräldrar som träffades i Frankrike medan hans far tjänstgjorde i armén under första världskriget.
Han sade: " Vi hade en underbar uppfostran.... Jag skulle inte ha ändrat något.
"Något händer och det orsakar en hel del upprörda, fruktansvärda stridigheter, men du måste bara gå vidare med det och komma över det."
Herr Hursey frågade om han någonsin tänkte på piloten och sade: " Jag kan inte stå ut med någon fientlighet mot dem. De gjorde bara sitt jobb, precis som min bror som var i RAF."
Ken Hursey var 16 år när två 250 kg bomber släpptes på en ammunitionsfabrik och dödade flera medlemmar av hans familj.