靜升王氏祖籍瑯琊（今山東膠南），后西遷至山西太原。南宋初年，族人王實由太原南遷至靈石縣溝峪灘村。元皇慶二年（1313），王誠齋又率家族遷至靜升村。清初，族人王興旺開始經商，做小買賣，至第十四世王謙受、王謙和、王正居等，資本見厚，店鋪增多，逐步成為豪商巨賈。到清中 葉，王家便由原來的平民百姓發展成為居官、經商、事農綜合型的名門望族。王家大院包括東大院、西大院和孝義祠，總面積34650平方米。

東大院俗稱高家崖，建于清嘉慶初年，是一個不規則形城堡式串聯住宅群。城堡因地布局，順勢而建。鳥瞰東大院，是由三個大小不同的矩形院落組成：中部是兩座主院和北圍院；東北部是俗稱“柏樹院”的小偏院；西南部是大偏院。城堡的四面各開一個堡門。東堡門位于主院前大通道的東端，西堡門開在大偏院的西南角，南堡門開在主院前大通道的中間，北堡門開在小偏院的東北角。南堡門外是一條長50米、寬3米的石板坡路，直通村中的五里后街。主院前的大通道長 127米，寬11米，全部用青石鋪成。大通道的南面是高高的磚砌花墻，墻內建有60多米長的風雨長廊。東大院主體建筑是兩座三進四合院，院門前都有高大的照壁、上馬石、旗桿石、石獅、石臺階等。從布局看，每座主院都有寬敞的正院、偏院、套院、穿心院、跨院等；按用途分，有堂屋、客廳、廂房、繡樓、過廳、書院、廚房之別。院內因地而異，修有甬道、幽徑、低欄、高墻等。院中有院，門內有門，窯頂建窯，房上座房。主院西南角的大偏院是由兩座花園式庭院組成的，可供主人小憩。主院正北的后院是由一排13孔窯洞組成而又分隔為四個小院的護堡院。整個東大院建筑規模宏大，結構嚴謹。

出東大院的西堡門，走過一條馬蹄形的溝澗小道，就是西大院。西大院俗稱紅門堡，是一處十分規則的城堡式封閉型住宅群，面向與背靠同東大院完全相同。俯視西大院，其平面呈十分規則的矩形，東西寬105米，南北長180米。只有一個堡門，開在南堡墻稍偏東的位置，正對著城堡的主街。雄偉的堡門為兩進兩層，一方刻有“恒禎堡”的青石牌匾鑲嵌在堡門正中央，因堡門為紅色，所以人們都叫西大院為“紅門堡”。堡墻外高八米，內高四米，厚二米多，用青磚砌筑。堡墻上有垛口。堡門外正對堡門的地方，有一座磚雕照壁。堡門左右及堡墻東北、西北角各有一條踏道可上堡墻。堡內南北向有一條用大塊河卵石鋪成的主街，人稱“龍鱗街”，街長133米，寬3.6米。主街將西大院劃為東、西兩大區，東西方向有三條橫巷。橫巷把西大院分為南北四排。從下往上數，各排院落依次叫底甲、二甲、三甲、頂甲。一條縱街和三條橫巷相交，正好組成一個很大的“王”字。堡墻東北角和西北角各有更樓一座。堡內東南角、西北角各有水井一口。堡內共有院落27座，除頂甲為6座外，其余三甲均為七座。各院的布局大同小異，多數為一正兩廂二進院，正面以窯洞加穿廊為主，頂層有建窯洞或建閣房的。大部分院落以南北中心線為對稱軸，東西基本對稱。也有一部分院落為偏正套院，院門偏在東南方向，院門內是一條較長的通道，通道西側南端是通往前院的門，北端是通往后院的門。