Да в любое время можно заходить, когда не закрыто. Мне кажется о покрытии головы тоже не следует сейчас сильно беспокоиться, тем более зимой многие в шапках. Кстати, другие православные вполне без покрытия головы посещают храм, в Греции скажем, так что это не канон, мне кажется.