时，朝中刑、兵、吏、工四部尚书就同时上书，劝谏帝君珍惜万金之体，不可以身犯险，那一代帝君大概也觉得登顶太累也太怕人了，祭过一回便不再登塔祭天，这座郊天塔也成了名不副实。

当时帝君起意筑塔，召天下良工于帝都，但却没人敢监工督造。当时工部尚书甚至以“此塔非人力可成”为由，力辞任命。于是有人举荐当时任军中工正的鲁晰子监工，帝君便抱着让他试试看的心思，破格提拔鲁晰子为工部侍郎，督造郊天塔。