秦始皇一生无后，最爱的女人也没有明确记载。传说他当时爱上了个邯郸女子，名阿房。他想立她为皇后，可是群臣反对，只因他是赵女，这个女子不想让秦始皇为难，于是就上吊自杀，秦始皇为了纪念她就建筑了一所宫殿，起名为阿房，但这也只是一个美丽的传说。
而真正历史上是认为当时在咸阳生活的人越来越多，而王宫又显的太小。为了巩固皇权，彰显权势，秦始皇下令在皇家园林上林苑中修建新的宫殿。但这座宫殿劳民伤财，当时六国刚刚统一，这大大的掏空了国库。
还有人认为秦始皇最爱的女子是胡亥的母亲，这个女人是阿若公主。这个阿若是楚国公主，作为政治联姻与嬴政结婚。后来嫁给秦始皇对他冷淡，但最终两人产生了爱情，因为她被秦始皇的雄才大略所吸引，还为秦始皇生下了胡亥。最终她结局凄惨，但这是影视剧中的故事。
秦始皇一生无后，后人猜测跟他的母亲赵姬有关。历史上，赵姬跟吕不韦的感情剪不断理还乱，还与多个男人有暧昧的关系，这些都被秦始皇看在眼里，最终才决定不立皇后。