总管府位于龙华山下古镇之西，与高雪君祠(高氏土衙)、高氏宗祠为邻，为国家级文物保护单位。历经两汉、唐(南诏)、宋(大理)、元、明、清七代。期间或军镇、或府衙、或自治土司衙署，皆有政治管理机构相延。世称“七朝古衙”
公元前109年，汉武帝置弄栋县，行政区域覆盖今日之楚雄、南华、牟定、元谋、姚安、广通等地。公元664年，为统一指挥洱海及滇池地区各部落抗御土蕃南下，唐高宗移建姚州都督府于此，又设南中统部，事关西南全局，军镇之地位，堪称六诏之中分，三川之门户，南中之锁钥。其建置军政合一，节制五十七州县，对如今的川西南、贵州西部、云南全境实行安抚和军事管理。南诏与唐王朝之间的天宝战争就是从姚州都督府而起。安史之乱使唐由盛而衰，天宝战争则是使唐由衰而亡的又一转折点。天宝之祸结束后，蒙段割据，偏安南诏国、大理国计五百余年。先为南诏国弄栋府，置弄栋节度，为六节度之一；后为大理国统矢逻，又名姚府，为八大名府之一。公元1328年，元文宗设姚安路军民总管府。公元1382年，明太祖改元朝建置姚安路为明朝建置姚安府，之后又改为姚安军民总管府。公元1760年，清乾隆裁府为州，称姚州，隶楚雄府。公元1914年，民国一体设县，称姚安县。此后，县名相沿至今。