当时修建碧玉神宫的工人们都以为赵高建立碧玉神宫是为他死后的埋藏之所，一个服侍皇帝的人修建规模如此之大的陵墓，气势堪比皇陵，闻所未闻。
那时候没人知道赵高的想法，直到碧玉神女像被雕刻出来，有人说赵高是太监。生前未尝男女行欢之乐，所以才会雕刻如此多的女子雕像放置于自己的地宫之内，企盼死后有阴妃。
为了建造一座千古巨宫，赵高亲自选址，要在奇险高绝的庐山中树立雕像。开凿庐山山体的时候，每天都会有近百人的伤亡，直至竣工，庐山内宫的开凿死了两万余人。
可真正的噩梦并不是庐山内宫的开凿，而是碧玉神像的雕刻，赵高想要雕刻一个前无古人后无来者的雕像，他生怕被后来者超越。所以动用十万人将毗邻长江的大崛山挖空。千丈长的山被挖出后，运输这座山到庐山山腹成了最大的难题。后来有人发现了一种铁树，可以承受十万万担之重而不变形，铁树当成滚木，可运输山，此工程耗费半年之久，死者亦是过万。
接下来，碧玉神女像的雕凿成了最大的难题，因为这是雕凿一座山，而会雕凿的工匠却只有百余人。如此浩大的工程雕刻完成至少也要三十年。他们的工期只有一年，再者如果神女像的雕刻一旦出了问题