因而派韩终、侯公、石生去寻访仙人求取不死的仙药。始皇便巡行北境，从上郡回来。燕人卢生到海中寻找仙人，回来以后为了说明鬼神之事，向始皇奏上谶纬图书，书上说：“灭掉秦的将是胡。”始皇于是命令将军蒙恬发动三十万大军，到北方攻击胡人，取下黄河以南一大块土地。三十三年，发动一些曾经逃亡的罪犯以及穷苦入赘于女家的男子，做买卖的生意人，攻取两广，设置桂林、象郡、南海，派了五十万人屯守。又在西北方驱逐匈奴，占有从榆中沿着黄河向东一直到阴山，将该地分成三十四县，在黄河附近筑城，作为要塞，命令蒙恬渡过黄河，攻取高阙、陶山、北假中，修建烽火台以及小城来追赶戎人，迁徙罪犯驻守先前占领的三十四县，禁止他们祭拜出现在西方的彗星。（从《考证》、屈万里说。）三十四年，命令办理讼狱不当的官吏，去修筑长城以及屯戍南方越地。
　　
　　始皇在咸阳宫设酒宴，七十个博士向前祝寿，仆射周青臣颂扬道：“从前秦国的领土不超过千里，仰赖陛下您的神灵明圣，平定天下，把蛮夷赶走了，日月所照临的地方，没有不称臣顺服，把当年诸侯王的土地改置成郡县，每个人安居乐业，不必为战乱忧愁，这伟大的功业可以流传万世，自上古以来没有人能?上陛下您的威德。”始皇非常高兴。博士齐人淳于越对始皇说：“臣听说周朝拥有天下一千多年，分封子弟及功臣，来作自己的枝辅，现在陛下您君临海内，而子弟却是匹夫，万一仓促间出现像田常六卿一类的乱臣，没有辅助如何挽救呢？事情不取法古制而能够长久不败的，从未听说过，现在青臣又当面阿谀您来加深陛下的过失，实在不是忠臣。”始皇把他们的议论交给众臣商讨，丞相李斯说：“五帝的制度不重复，三代的举措不因袭，各自采行自己的方法去治理国家，并不是有意和前代相反，这是时代变迁的原故，现在陛下您创造大事业，建立万世的功勋，本来就不是这批愚蠢的读书人所能了解，何况他们专说一些飘飘渺渺的三代之事，如何取法呢？前些时候，诸侯们为了互争长短，才用优厚的俸禄招致游学之士，如今天下已经安定，政令都由陛下一个人决定，老百姓在家就应该努力农工生产，士人则学习法律政令，现在这群读书人不学当今的律令，却要模仿古人，卖弄知识，批评政府，惑乱人民的听闻。丞相臣李斯冒死上言陛下，从前天下离析混乱，无法统一，所以许多诸侯同时兴起，谈论上古之事，妨碍眼前的行宜，矫饰虚诞的言语，搅乱名实，每个人都认为自己所学的即是天下最完美的了，任凭主观，诽谤在上位者所制定的制度。今天，皇帝您并有天下，分别是非，奠定至高无上的权威，而读书人仍然私自教授，结群成党非议政府的法令教化，听到朝廷的举措，就本着自己学来的知识批评一番，所以陛下的政令一下，整条巷弄里的人议论纷纷，他们用大言欺骗君王来博取称誉，作一些奇怪的行为来获得高名，领导着一群在下的人妄造谤言，像这样，如果不禁止，那么在下的臣民私相勾结，禁止他们的批评才是合宜。臣请求陛下下令史官，把非秦朝的典籍都放火烧掉，非博士官的职务而敢暗地里收藏《诗经》、《书经》、诸子百家书的，全部搜出送到官府焚毁，有敢相聚讨论《诗》《书》的，在市上处死，推崇古代，诽薄当代的，诛杀全族，官吏有知道而不检举的，以同罪论。命令下达后三十天，仍然不烧书的，就刺上字发配边疆去修筑长城，服劳役四年，只有医药、卜筮、种树一类的书籍，不必销毁，如果有人想学文字法令，必须到官府里向官吏学习。”始皇下诏说：“可以依照这个办法去做。”
　　
　　三十五年，开辟大道，通到九原，直抵云阳，挖山洞，填河谷，使两地直接往来。始皇认为咸阳人口太多，而先王所修筑的宫廷狭小，我听说周文王建都丰，武王建都镐，丰镐之间才是帝王的都会所在。于是在渭水南岸的上林苑中营造朝宫。先盖正殿阿房宫，东西广五百步，南北长五十丈，殿中可以容纳万人，殿下可以竖立五丈高的大旗。周围架木为棚以行驶车马，从阿房宫下直达南山，在南山的山巅造起大门，又开夹道，从阿房宫渡过渭水延续到咸阳，象征天上阁道星横绝天河抵达营室星的样子。（从胡怀琛、庄适说。）阿房宫尚未筑成，等到大功告成，始皇想要另外取一个更好的名字。因为它四阿旁广又近咸阳，便称为作宫阿房，所以天下叫它阿房宫。当时受宫刑的有七十余万人，都被分派去建筑阿房宫或骊山，挖掘北山的大石，（椁字衍，从《志疑》、《考证》说。）运输四川、荆楚的木材，都送到这个地方来，关中之地宫殿有三百栋，关外有四百多栋，于是在东海附近的朐县边界上，树立石碑，作为大秦帝国的东门，迁徙三万户民家到骊邑居住，五万户到云阳居住，都免去十年的徭役。