郡目付役的职位，并受到永远蛰居的处分，导致生活穷困而无法继续升学，只能在弘道馆教授儒学的国学家枝吉神阳开设的私塾学习，并因此受到神道及尊皇思想的影响。这时的新平由于生活穷困，有「饥寒生智慧」的口头禅。嘉永3年（1850年）枝吉神阳发起「义祭同盟」，他与大隈重信、副岛种臣、大木乔任、岛义勇等人一起参加。江户时代后期，受到外国船出现在日本近海，以及美国的马休·佩里舰队、俄罗斯帝国的普提雅廷舰队等来航请求通商的时势影响，让他在安政3年（1856年）22歳时，执笔书写关于开国必要性的『图海策』，并因此受政府重用