Matson ble dement i sine eldre dager (han tilbrakte flere år sengeliggende), som ble koblet til kronisk traumatisk encefalopati, noe folk med en historie av hjernerystelser og hodeskader har blitt diagnostisert med etter død. Ifølge sønnen Ollie Matson Jr. vasket Matson bilen fire ganger dagen og kunne finne på å grille halv syv om morgenen i sine siste år.