在秦始皇一统天下后,由于国家垄断暴力,大量游侠失去了工作机会。为了适应这种新形势,失业的游侠们组成了自己的新组织,并选举优秀人物作为中心。这些布衣之侠或吕相之侠在战国时期开始出现,并在秦朝打击贵族造成权力真空后得到发展。刘邦等人也与游侠有关系,如刘邦曾是大侠张尔的门客,在统一后投身官府。然而,汉代以来打击游侠是基本立场,班固认为游侠出现是中央缺乏权威的表现。郭解等人虽有优点但罪恶重大,在制度精神上存在问题。