留许多门客，包括侠士，如信陵君魏无忌就收容许多游侠。早期侠客社会势力较大，有些侠客有许多部下、追随者和族人，忠心耿耿，连群结党，人多势众，声势浩大，号令一方，如西汉时的朱家、田仲、剧孟、郭解等等。这种侠客往往称为豪侠。汉太祖为游侠出身，非常敬重侠客。西汉初年，朝廷招纳了一些豪侠为官，如西汉时的灌夫、陈遵，都官拜太守。豪侠亦往往与官员结交，成为地方官府的吏役，甚至做地方官的爪牙。但从汉景帝开始，那种势力特别强大的豪侠，朝廷视为对皇权和秩序的严重威胁，设法打击，诛杀许多豪侠，汉武帝更是大规模有系统地加以翦除