五台山如今最火爆的庙并不是文殊庙，而是看似不太显眼的“五爷庙”，也叫万佛阁，而且这个庙之前并不是一个单独的寺庙，这个故事说起来挺有意思的。
这个寺庙边上如今有一个庙，这个庙比五爷庙冷清不少，却有一个上千年年的古塔，这个塔最早兴建的年代很久远了，是北魏年间之前【具体年不可考】，可以说其他的建筑都是依附这个塔承建的，这个庙就叫做“塔院寺”，而且之前的塔是显通寺的，后来在永乐年间分开了，独自成庙。
而五爷庙之所以有庙，是因为之前是塔院寺的属庙，就是说这个庙原来是塔院寺的，最早的五爷庙建筑是文殊殿，在明朝万历年间才有的，而五爷最早只是庙里面供奉的龙王爷的第五个儿子，因为龙王和龙母一共有五个儿子，老大，老二，老三，老四，老五是最小的儿子，最早的时候五个儿子都供奉在龙王和龙母身边的。