Валериан Дерожински е роден на 15 юли 1826 г. в село Надеждовка, Воронежка губерния в семейството на потомствения дворянин от полски произход Филип Казимирович Дерожинский. Бащата е руски офицер, полковник, командир на Рижкия драгунски полк. Отличава се в Отечествената война срещу Наполеон Бонапарт (1812) и при превземането на Париж пез 1814 г.