黄山发现的比五岳要晚，有了五岳之后后人才发现黄山比五岳更好。所以才有了“五岳归来不看山，黄山归来不看岳”之说。

五岳的得名，据说最早可追溯到尧舜的时代，尧命羲和氏四子分管四岳。那时“四岳”是主管方岳的官吏职称，天子巡狩时，各主管方岳的官吏在驻地选择一座高山，放火发出信号，以召集诸侯。于是，最早的几座发信号的山便成了岳官的首府。舜时，岳官的职称开始与这些名山的山名统一起来。至今作为一种制度，则始于汉武帝之时，到了汉宣帝，才确定五岳为：东岳——山东泰山，西岳——陕西华山，中岳——河南山，南岳——安徽天柱山，北岳——河北大茂山。以后，隋代改南岳为湖南衡山，明代改北岳为山西恒山，最后始成今日之五岳。而黄山的成名要晚的多，山势太险。