奴难道不畏惧吗？”
卫律深知任何手段都不能使苏武屈服，只好向单于回奏。单于因此更加敬重苏武坚贞不屈的气节，所以愈发想要招降苏武，为己所用。为了逼迫苏武妥协，单于将苏武囚禁在一个阴冷潮湿的大地窖中，并断绝一切饮食供应。
当时天降大雪，苏武孤零零的躺在冰冷的地上，连日以来靠吞食积雪和衣服上的毡毛艰难维持生命，所以大难不死。
匈奴认为苏武有神灵庇佑，于是便把苏武发配到北海千里无人烟的地方放牧公羊。匈奴人语带嘲讽的对苏武说：“等何时公羊能产下羊羔，便送你回汉朝！”常惠等其他不肯投降的汉使，像苏武一样被匈奴人分别安置到不同的地方。