Idrettsforeningen er medlem av Norges Idrettsforbund gjennom Vestfold Idrettskrets. Klubben er også medlem av særforbundene Norges Fotballforbund, Norges Håndballforbund, Norges Svømmeforbund og Norges Gymnastikk og Turnforbund, gjennom henholdsvis Vestfold Fotballkrets, Norges Håndballforbund Region Sør, Vestfold Svømmekrets og Vestfold Gymnastikk og Turnkrets. Holmestrand Idrettsforening hører hjemme i Holmestrand kommune og er medlem av Holmestrand Idrettsråd.