从史料记载看，“绣衣使者”前期的职责主要是奉命“讨奸”、“治狱”，督察官员、亲贵奢侈、逾制、不法的事。他们神出鬼没，无处不在，一度非常活跃，甚至“威振州郡”，令很多不法官员闻风丧胆。后来，随着情势变化，“绣衣使者”又有了“捕盗”的职责，也就是镇压农民起义。
探索网配图
汉武帝是个能君，也是个能花钱的主。抗击匈奴也好，奖赏将士也好，通使西域也好，大兴土木也好，庞大的开支耗尽了文景之治以来的积蓄，各种负担最终变相地转嫁到了劳动人民身上，形成大量农民破产逃亡。到元封四年(前107年)，关东流民达二百多万，社会矛盾日趋严重。天汉二年(前99年)，农民起义频发，天下骚动，起义遍及豫、楚、齐鲁、燕赵，气势浩大。
对于当时的风暴，蔡邕也曾言，“民不堪命，起为盗贼，关东纷扰，道路不通，绣衣直指之使奋斧钺而并出”。为此，汉武帝派出“绣衣使者”，督促各地镇压农民起义，上至州刺史、郡太守，下至一般小吏，凡对起义镇压不力的，一律就地处决，称“沉命法”。此外，他们“奋斧钺而并出”，手持武器，对农民镇压也很残酷，有的地方只有几千人起义，他们屠杀的甚至上万。暴胜之、王贺等人都是此时充任绣衣的，而真正将“绣衣使者”干到巅峰的，当属江充。
