初，左伊秩訾为呼韩邪画计归汉，竟以安宁。厥后或谗伊秩訾自伐其功，常鞅鞅，呼韩邪疑之；伊秩訾惧诛，将其众千馀人降汉，汉觉得关内侯，食邑三百户，令佩其王印绶。及呼韩邪来朝，与伊秩訾相见，谢曰：“王为我计甚厚，令匈奴至今安宁，王之力也，德岂可忘！我失王意，使王去，不复顾留，皆我过也。今欲白日子，请王归庭。”伊秩訾曰：“单于赖天命，自归于汉，得以安宁，单于神灵，天子之祐也，我安得力！既已降汉，又复归匈奴，是两心也。愿为单于侍使于汉，不敢服从！”单于固请，不能得而归。
竟宁元年戊子，公元前三三年春，正月，匈奴呼韩邪单于来朝，自言愿婿汉氏以自亲。帝今后宫良家子王嫱字昭君赐单于。单于欢乐，上书“愿保塞上谷以西至敦煌，传之无穷。请罢边备塞吏卒，以休天子群众。”天子下有司议，议者皆觉得便。郎中侯应习边事，觉得不成许。上问状，应曰：“周、秦以来，匈奴暴桀，寇侵边疆；汉兴，尤被其害。臣闻北边塞至辽东，外有阴山，东西千馀里，草木富强，多禽兽，本冒顿单于依阻此中，治作弓矢，来出为寇，是其苑囿也。至孝武世，出师挞伐，斥夺此地，攘之于幕北，建塞徼，起亭隧，筑外城，设屯戍以守之，然后边疆得用少安。幕北地平，少草木，多大沙，匈奴来寇，少所蔽隐；从塞以南，径深山谷，来往差难。边长老言：‘匈奴失阴山以后，过之何尝不哭也。’如罢备塞守兵，示蛮夷之大利，不成一也。今圣德广被，天覆匈奴，匈奴得蒙全活之恩，顿首来臣。夫蛮夷之情，困则卑顺，强则骄逆，本性然也。前已罢外城，省亭隧令，裁足以候望，通烽火罢了。古者安不忘危，不成复罢，二也。中国有礼义之教，科罚之诛，愚民犹尚犯禁；又况单于，能必其众不犯约哉！三也。自中国尚建关梁以制诸侯，以是绝臣下之觊欲也。设塞徼，置屯戍，非独为匈奴罢了，亦为诸属国降民本故匈奴之人，恐其思旧流亡，四也。近西羌保塞，与汉人交通，吏民贪利，侵盗其畜产、老婆，以此痛恨，起而背畔。今罢乘塞，则生嫚易分争之渐，五也。往者参军多没不还者，子孙贫苦，一旦亡出，从其亲戚，六也。又边人奴婢愁苦，欲亡者多，曰：‘闻匈奴中乐，无法候望急何！’然时有亡出塞者，七也。盗贼狡猾，群辈犯法，如其窘急，亡走北出，则不成制，八也。起塞以来百有馀年，非皆以土垣也，或因山岩、石、木、溪谷、水门，稍稍平之，卒徒筑治，功费长远，不成胜计。臣恐议者不深虑其终始，欲以壹切省繇戍，十年以外，百岁以内，卒有它变，障塞粉碎，亭隧灭尽，当更发屯缮治，累世之功不成卒复，九也。如罢守兵，省候望，单于自以保塞守御，必深德汉，要求无已；小失其意，则不成测。开蛮夷之隙，亏中国之固，十也。非以是永持至安，威制百蛮之长策也！”对奏，天子有诏：“勿议罢边塞事。”使车骑将军嘉口谕单于曰：“单于上书愿罢北塞吏士屯戍，子孙世世保塞。单于乡慕礼义，所觉得民计者甚厚。此悠长之策也，朕甚嘉之