公元前218年，秦始皇為了尋找長生不老以及天下未解的秘密，特意組建了一支由當世的奇人異士，尋古探密的軍隊，叫做夜遊軍。他們軍紀嚴明，白天隱匿，晚上出巡。
這支軍隊由4支擁有特殊技能的兵士組成。一支望氣者，可知天下山川河脈，理地下暗河古跡，既風水師；一支馴獸者，可以呼獸喚鳥，禦獸探寶，既領獸師；一支機括者，可以巧結各式機關，遍解天下奇妙機關，既靈臂師；一支通靈者，既武功了得，都有超越常人的記憶力和耳力，可以聽見常人不容易聽到的聲音，既諦聽師。
然而，在秦始皇帝去世之後，這支軍隊便四散消失於民間。直到南宋的兒皇帝劉豫抓住了當時的諦聽師的後人，才從他的口中窺探出始皇帝曾經組建過的這支軍隊。這四門在那時才被迫得以重聚，劉豫並為四門設立一個專門盜墓的官方機構----淘沙官。