李隆基在被幽禁宫中的那段时间里，日子是十分难熬的。就连宫内的小宫女见了他也都是爱理不理的。至于外面的世界，他也是接触不到的。这样的境况，对于懦弱者而言肯定是灭顶之灾，但对于刚强者来说，更能坚定意志。
李隆基没了母爱，周围也是冰冷的。父亲这边的亲戚，有时只有姑母太平公主会来看看他，她待小隆基还是不错的；然而太平公主为了避嫌，为了不让她的皇帝母亲不高兴，也很少来。而他母亲那边的亲戚只有一个小姨母还留在京城里，这给了小隆基一些安慰……
李隆基在深宫大院里读书、习武。他相信，总有一天会重建李唐天下。虽然他们一家人在外表上看不出什么，但其实都憋着一股劲儿呢。李隆基七岁那年，他的皇帝奶奶举办家宴，命他们兄妹为大家表演节目助兴，李隆基当时跳了一支名叫“长命女”的舞，五岁的弟弟李隆范表演的是一段名叫“兰陵王”的歌舞戏。李隆范进场的时候，还大声道：“祝愿神圣皇帝万岁，子孙成行！”
李隆基想起来都心痛，皇帝奶奶将他们李家的人都快杀光了，哪还会“子孙成行”？
皇帝奶奶不是亲人，而是仇人！
李隆基天生灵秀，只要是他感兴趣的，别人一指点他就会。因此在这幽禁的生活当中，他不光练武学文，就连歌舞、打球也学得很是精当，人又长得英武，自然人人见了都喜欢。父亲李旦也是个文学素养特别高的人，被幽禁在深宫当中，闲得慌，就潜心教育自己的孩子。这就给李隆基打下了很好的文化基础。
如此过了五年，他的皇帝奶奶终于给他们一家解禁了。
他的皇帝奶奶武则天与世抗争实在是累了，觉得这个天下最终姓不了“武”，就像狄仁杰说的：“立儿子为皇嗣（皇储），她驾崩后会享受宗庙里的祭祀；立侄子为皇嗣，天下可没有奉姑母为宗庙的。”还是让它姓“李”吧，于是，便想着还天下于李家。这次，她选择了李显当她的皇位继承人，于是李显便成了太子。李旦依旧被封为相王，放出宫去。
李隆基虽然没有了皇嗣的身份，然而得到了自由。这时候，他已经十三岁了。
他们家被幽禁在皇宫内整整五年的时间！
一家人真是犹如小鸟出了笼一般，心里一阵轻快。无论如何，还是自由好。李旦心里别提有多畅快，小隆基也感觉天是那么高，地是那么阔，这一切是多么让人激动啊！
然而，想起自己的母亲，李隆基还是暗自垂泪。
他恨他的那个皇帝奶奶！
而且，他的那个皇帝奶奶虽然立了李隆基的伯父为太子，自己却还是不肯退位，天下人归唐之心迫切，她的江山怎能坐得稳？何况她如今也实在是老了。
这天下真是要动荡不安了。
终于，在公元705年爆发了“神龙政变”。太子李显、相王李旦还有他们的妹妹太平公主，联合大臣张柬之、李多祚等一批位高权重的大臣趁武则天病重的时候，包围武则天的寝宫，逼她让位。他们站在皇帝武则天的榻前，恳求道：“陛下，请让位于太子！”……
武则天见大势已去，不得不将皇位让给儿子李显，有气无力地说道：“朕明白这个天下迟早要归还李家的，可你们为什么非要这么做呢？”
众人又道：“恳请陛下让位于太子！”
武则天说：“好，朕这就下诏，让位于李显！”
李显当了皇帝后，大周自然不存在了，又恢复了李唐的天下。许多流落于民间的李氏皇族及远亲又重新被召了回来，该升官的升官，该封爵的封爵。
这日子好像又过顺当了。
而此时的李隆基已经长成了一个英武的大小伙子，仪范伟丽，具有非常之相，一身英雄气概，因此被他的伯父唐中宗李显任命为卫尉少卿。