Halmvepser er mellom 4 og 26 millimeter lange. Men de fleste artene er under 14 millimeter lange. Kroppen er slank, uten en innsnørt «midje». Fargen er vanligvis mørk, svart, men flere arter har gule flekker og bånd på bakkroppen. Hunnen har et kort, men kraftig eggleggningsrør.