卫律意识到苏武不可能被胁迫投降,于是向单于报告了情况。单于越发希望迫使苏武屈服,于是将他囚禁在地窖中,不给他吃喝。天下起了大雪,苏武躺下来嚼着雪,和羊毛一起吞下来充饥,几天都没有死去。匈奴人以为这真是神奇的,于是将苏武迁移到北海边无人的地方,让他放牧羊群,规定只有等到羊群生下后代,他才能归还给汉朝。同时,苏武的部下和随从人员如常惠等都被分别安置在其他地方。 苏武被迁往北海后,粮食无法供给,他只能靠挖掘野鼠所贮藏的野生果实来维持生活。他手持汉朝的符节,一直担任着牧羊的职责,不论睡觉还是起来,都不离手。如此坚持,以至于连系在节上的牛尾毛也全部脱落了。