Em 1920, oficiais atléticos de seis HBCUs do Texas - C.H. Fuller do Bishop College, Red Randolph e C.H. Patterson do Paul Quinn College, E.G. Evans, H.J. Evans e H.J. Starns of Prairie View A&M, D.C. Fuller do Texas College e G. Whitte Jordan do Wiley College - reuniram-se em Houston, Texas, para discutir interesses comuns. Nesta reunião, eles concordaram em formar uma nova liga, a SWAC.
Paul Quinn tornou-se o primeiro dos membros originais a deixar a liga, quando o fez em 1929. Quando a Universidade de Langston de Oklahoma foi autorizada a participar da conferência dois anos depois, ela começou a migração de instituições apoiadas pelo estado para a SWAC. A Universidade do Sul entrou na liga em 1934. Arkansas AM&N entrou em 1936 e a Texas Southern University em 1954.
medida que as escolas apoiadas pelo estado se tornaram maiores, tornou-se difícil para as escolas apoiadas pela igreja pagar por suas equipes esportivas. Logo as escolas apoiadas pela igreja começaram a deixar a conferência. Bishop se retirou da conferência em 1956, Langston em 1957 e Huston-Tillotson (antigo Samuel Huston) em 1959. Isso aconteceu um ano depois que mais duas escolas apoiadas pelo estado entraram na liga (Grambling College e Jackson State College). O ciclo de entradas e saídas continuou em 1961 quando o Texas College se retirou, seguido pela entrada da Alcorn A&M em 1962. Wiley saiu em 1968, no mesmo ano em que o Mississippi Valley State College entrou. O Arkansas AM&N saiu em 1970 e a Universidade Estadual do Alabama entrou em 1982. Arkansas-Pine Bluff (antigo Arkansas AM&N) reingressou na SWAC em 1º de julho de 1997, recuperando o status de membro pleno um ano depois. A Universidade A&M do Alabama tornou-se o décimo membro da conferência quando se tornou membro pleno em setembro de 1999, após um período de um ano como membro afiliado da SWAC.
A competição de campeonato atual oferecida pela SWAC inclui competição para homens em beisebol, basquete, cross country, futebol, golfe, pista indoor, outdoor track & field e tênis. A competição feminina é oferecida nos esportes de basquete, boliche, cross country, golfe, pista indoor, outdoor track & field, futebol, softball, tênis e vôlei.
