Gray también estaba interesado en los sellos postales; el 1 de mayo de 1840, el día que los "Penny Black" salieron a la venta, compró algunos con el objeto de salvarlos, haciéndose así el primer coleccionista filatelista conocido del mundo.