榊原氏是源义康的子孙，之后移住到三河国仁木（爱知县冈崎市仁木町）并称仁木氏。榊原氏自称为仁木氏的庶流。
战国时代.在日本战国时代仕于松平氏，原本只是陪臣。后来在德川家康新设旗本先手役后被提拔的式部大辅康政与本多忠胜等人并列为德川四天王、德川十六神将，因此成为上野国馆林藩藩主。子孙成为谱代大名和亲藩。
江户时代.式部大辅康政的玄孙政伦没有嗣子，式部大辅家在第5代时一度断絶。不过因为是亲戚大名家，最后在旗本的收入养子来避免断絶。