四川西昌（今凉山彝族自治州的首府，明初被称为小云南）地区本两汉越嶲郡故地，唐称嶲州，在这里设置都督府，是中央王朝控扼和经营川南云贵民族地区的政治、军事、经济、文化的桥头堡，历来为兵家大争之地。明太祖将西昌列为必守之地，设建昌都司（即四川行都司），屯驻重兵，五卫八所营堡棋盘罗列，驻军人数多达五万八千之众。又封开国功臣俞通渊为越嶲侯，於邛部川筑越嶲侯卫城（今凉山彝族自治州越西县），颁给誓书铁券，命其世代镇守川南民族地区。清代改称宁远府，又设建昌镇总兵，国家经略斯地，从不敢懈怠。抗日战争时期，国民党曾计划迁都西昌，在西昌设有军事委员会委员长行辕和蒋介石官邸，1949年时曾作为西康省省会，解放后设西昌专区。1978年，西昌专区被撤销，并入相邻的凉山彝族自治州，凉山州州府和大量彝族干部群众亦从昭觉县（汉代称卑水县）迁来西昌。西昌和凉山汉族居民大多是明初当地屯垦戍边的卫所军人后裔，又称为屯堡人，祖籍多在江南和陕西，他们对明朝的感情很深，满清入关以后，西昌是南明抗清的一个基地，直到永历帝父子逃入缅甸以后，西昌才被清军攻陷。后来西昌汉族军民又随吴三桂反清，使用过吴三桂的“大周”年号，至今在西昌一些明末清初的古碑刻上还能看到永历和大周纪年。
部分西昌和凉山汉族土著则是南诏和大理时期进入这一地区的白蛮（今称白族）后裔，他们曾经长期是这一地区的统治民族，明初的世袭镇国上将军、建昌卫土指挥使安氏（后来改称河东长官司）是清代以前凉山最大的土司，根据清代以前安氏墓志铭和史料记载，安氏以及他下面的五大把事杨春、张真、张五十、赵阿恭、刘华严奴等皆为白蛮土司，又德昌县境内的汉族土著赵氏，会理县境内的汉族土著赵氏、高氏、王氏，米易县威龙州土司张氏等，在清代以前亦为白蛮土司。（见《西南民族大学学报》1990年第六期：《白族入川历史考述》）西昌河东街东面有段家街，本为大理贵族段氏世居之地。西昌泸山光福寺侧过去有蒙段祠，就是南诏和大理国时期皇室蒙氏和段氏的太庙，南诏皇帝蒙酋龙就是死在西昌景王宫（今西昌市人民政府）内的，后来也葬在西昌。西昌马道镇围墙村的段氏，其祖上也是明初的白蛮土千户段太平。西昌境内有南诏、大理时期的白蛮火葬墓数万座。明代以前，环邛海而居的“渔人”皆为白蛮渔民，明朝末年还把他们列为“建昌九夷”之一，今天西昌汉族百姓中还流传川兴镇小渔村的“陈何段（三姓）是蛮转汉”的说法，这一说法是有历史根据的，但由白蛮同化成汉族的西昌土著却远远不止这三个姓，据史书记载，白蛮同化为凉山汉族，共有数十姓之多，其中段、赵、高、苏、张、王、李、杨、周、何、龚、尹等十二姓皆为今日凉山汉族土著大家族。凉山汉族称白蛮为“僰人子”，后来讹为“白儿子”或“白耳子”。（见《云南社会科学》1991年第一期：《明代建昌“渔人”族属考》）段姓乃大理国皇族后裔，赵姓乃南诏清平官（宰相）赵铎些后裔，高姓乃大理宰相高观音后裔。
位于今凉山彝族自治州昭觉县普诗乡的南诏时期博什瓦黑佛教阿吒力派石刻岩画是与南诏德化碑、崇胜寺三塔、剑川石窟具有同等历史地位的南诏历史文物，就是唐宋元明时期统治昭觉的白蛮土官赵氏所开凿的，其始祖就是南诏清平官赵铎些。元明两代有北舍县，其管辖范围就是今天的昭觉县普诗乡、马增依乌乡和西昌市大兴乡一带，赵家土司最早是住在昭觉的竹核，后来西迁到普诗乡的博什瓦黑附近的坡觉寨子，“博什”就“北舍”的彝语异译。明朝初年，北舍县土知县赵士贤还来京贡马。明代中期以后，凉山黑彝奴隶主家支势力崛起，奴隶制恶性扩张，统治昭觉的白蛮赵氏土司被造反的黑彝奴隶主攻杀，土司衙门被烧，赵氏土司后人翻山逃到西昌大兴乡居住，逐渐同化为汉族，现大兴土著赵氏的祖坟还在昭觉马增依乌乡境内，部分赵氏则同化为昭觉境内的黑彝，改为彝族姓氏“莫色”。一直到上个世纪八十年代后期，昭觉彝族老人都还称大兴汉族赵氏为“莫色兹莫”（赵家土司），知道大兴汉族赵氏的祖先就是古代统治昭觉彝族的土司。（见《民族研究》2003年第三期：《凉山昭觉博什瓦黑石刻的族属为白族考》）而在今凉山州德昌县境内的白蛮赵姓土司是一直到了清朝咸同年间才被满清政府改土归流的，“德州（今德昌）土司赵光远，已在咸同年间改土归流。”（见中国社会科学院民族研究所四川少数民族社会历史调查组：《凉山西昌彝族地区土司历史及土司统治区社会概况》）