云臺山歷史悠久，文化底蘊相當深厚。解放后，在云臺山山腳下的高廟村挖掘出土了齊家文化類(lèi)型的紅陶罐、漢代灰陶盆等文物，還有新石器時(shí)期的仰韶文化遺址。相傳很早以前，這里居住著(zhù)一個(gè)姓高的農戶(hù)，他主持在云臺山的山頂上建了一座東岳泰山廟，故起名曰高家廟。雖然高家廟到底建于何時(shí)，暫時(shí)無(wú)從考證，但最遲可推至北宋崇寧年間，距今已有900多年的歷史。當時(shí)，廟內就已經(jīng)建有無(wú)量殿、靈官殿、圣母宮等宮殿。明洪武年間在廟宇四周筑起了堡墻，至今在云臺觀(guān)四周還有一些斷壁殘垣可見(jiàn)一斑。清雍正三年（1725年）建鐘樓一座，并鑄八卦大鐘一鼎，據說(shuō)這鼎大鐘的聲音洪亮，音色純正，方圓五六十里都能聽(tīng)到鐘聲。民國9年大地震，廟宇多數被震塌。1987年，附近群眾自籌資金重修無(wú)量殿、靈官殿、圣母宮、社稷宮和鐘樓，這些宮殿的內外均有彩繪壁畫(huà)，共有大象塑像16尊。其中靈官殿有邑人安維峻敬書(shū)的“護國佑民”牌匾一面；圣母宮懸有蕭嫻題寫(xiě)的“圣母宮”牌匾一面，魯岱山下氏許行題寫(xiě)的“九天云裊”牌匾一面。

云臺山西北邊的山腳下建有高大雄偉的云臺山劇場(chǎng)，每年春、秋兩季，當地人都要在此各舉行一次大型廟會(huì )，每次都要請有一定知名度的劇團唱四天四夜的秦腔。每到舉行廟會(huì )的時(shí)候，云臺山上下燈火輝煌，看戲的、焚香的、買(mǎi)貨的，各地游客與商販絡(luò )繹不絕，簡(jiǎn)直熱鬧極了。此時(shí)，云臺山變成了當地群眾開(kāi)展文化娛樂(lè )活動(dòng)和進(jìn)行商貿交流的重要場(chǎng)所。

1989年，云臺山高家廟仰韶文化遺址被列入縣級文物保護單位，立碑建檔，加以保護。