西域（新疆）重返中國版圖，是英雄豪傑們千辛萬苦換取來的。本世紀（二）第三年（一○二），總督（都護）班超退休，返回洛陽。東漢政府派遣一位看起來十分聰明的將領任尚接替，任尚向班超請益說：我初次擔當這麼大的責任，深感難以負荷。您在塞外三十年，請賜指教。班超回答說：塞外的中國官員，差不多在國內都犯過錯誤，才出塞立功求贖，並不都是小心謹慎、孝子賢孫型那種人。至於外國人士，更各有各的企圖。很難使他們順眼，卻很容易激起他們的反抗。你的性情，十分嚴正。俗話說：太清澈的水沒有大魚，太嚴格的要求失去團結。我的意思是，凡事應該求其簡單，對小過錯多加寬恕，分層負責，你只總攬大綱，不挑剔小節。
班超跟張騫一樣，不僅是成功的冒險家，更是成功的政治家。但智慧低一級數的人，永遠不能領悟高一級數人的見解，猶如一頭牛永遠不能領悟交響樂。班超走後，任尚譏諷說：我以為班超有什麼了不起源來是個平凡人物。
只四年時間，任尚就激起西域（新疆）所有國家的叛變。任尚的總督府繼班超之後，設在疏勒王國（新疆喀什）。一○六年，各國聯合向疏勒進攻，任尚不能阻擋，急向國內求救。東漢政府把他召回，另行派遣一位將領段禧繼任總督。但混亂的局勢已不可收拾，段禧轉戰到龜茲王國（新疆庫車），不能再進。龜茲王是支持段禧的，但龜茲人民叛離他們的國王，與溫宿王國（新疆烏什）、姑墨王國（新疆阿克蘇）組織聯軍，攻擊段禧和龜茲王。段禧把他們擊敗，不過整個西域只剩下龜茲一座孤城，前瞻十分黯淡。勉強支持到明年（一○七），東漢政府只得再撤銷西域總督，撤回所有殘留的屯墾區。
一一九年，敦煌（甘肅敦煌）太守曹宗試探著派遣部將索班再進入伊吾盧（新疆哈密）屯墾，鄯善王國（新疆若羌）和車師前王國（新疆吐魯番），重又歸附中國。不久，尚未向西移盡的北匈奴殘餘部落（新疆阿爾泰山南麓）跟車師後王國（新疆吉木薩爾）聯合，攻陷伊吾盧，殺死索班。鄯善王國向中國求救，中國政府正困於日益嚴重的蕪戰，不能出兵。只派遣了班超的兒子班勇擔任西域（新疆）參謀長（西域長史），進駐敦煌，遙作聲援。北匈奴的殘餘部落和車師後王國乘這個機會，企圖進攻已成為中國本土的河西走廊。身為英雄之子的班勇，忍無可忍，率領六千人反擊，生擒車師後王國國王，帶到索班死難處斬首，把頭傳送到一千九百里外的首都洛陽，懸掛示眾。然後徵調各國軍隊，進攻北匈奴的殘餘部落，北匈奴大敗，向北逃走，從此再沒有出現。
然而，中國也沒有再派總督，只繼續派參謀長代理。班勇的後任，沒有一個是適當的人選。這是統治階級長期腐敗後必然的現象，根已經潰爛，便很難長出好的果實。最後一任參謀長王敬，他大概很羨慕他的前輩們的威風。紀元一五二年，他擊斬於闐（新疆和田）國王。於闐人民反攻，把王敬殺掉。這時，中國正陷於內爭，不能再派出使節，西域（新疆）遂再一次的跟中國脫離。但經濟文化的交往，在已經建立了數百年的基礎上，並沒有中止。