在石坊两侧分别立两个石碑，一边是“登高必自”碑，为嘉靖年间济南府同治翟涛题的一块碑，另外一边提有“第一山”碑，是巡抚山东监察御史李复初题的。在石坊的北侧有着一处天阶坊。

关于孔子登临处是有一个典故的。孔子三十那年，离开故土鲁国前往齐国，期间路过泰山于是登上山顶。还有一次，孔子带着得意门生颜回也登上过泰山。在泰山上，孔子看向东南再看看阊门，还看到阊门有着一匹白马。于是问颜回，你看到阊门了吗?颜回答道：是的看到了。孔子再问：你看到阊门下面有什么吗?颜回道：看的不争气，只看到一团白色的。孔子说那是一个白马。师生两人下山后奇怪的事情发生了，颜回极速变来，头发花白，牙齿掉光。

这只是一个传说，从这个传说中可以看出几点信息，一个就是孔子登泰山不止一次两次，第二个就是泰山不好爬，颜回回来后身体衰落了。在孔子看来，泰山的地位是崇高的，他将自己比喻为人中之泰山，足以看出泰山在孔子心中的分量。