În 1920, oficialii sportivi de la șase Texas HBCU - C.H. Fuller de la Bishop College, Red Randolph și C.H. Patterson de la Paul Quinn College, E.G. Evans, H.J. Evans și H.J. Starns de la Prairie View A&M, D.C. Fuller de la Texas College și G. Whitte Jordan de la Wiley College - s-au întâlnit în Houston, Texas, pentru a discuta interese comune. În cadrul acestei întâlniri, au convenit să formeze o nouă ligă, SWAC.
Paul Quinn a devenit primul dintre membrii inițiali care a părăsit liga când aceasta a făcut acest lucru în 1929. Când Universitatea Langston din Oklahoma a fost admisă în conferință doi ani mai târziu, a început migrația instituțiilor susținute de stat în SWAC. Southern University a intrat în ligă în 1934. Arkansas AM&N a intrat în 1936, iar Texas Southern University în 1954.
Pe măsură ce școlile susținute de stat au devenit mai mari, a devenit dificil pentru școlile susținute de biserică să își plătească echipele sportive. În curând, școlile susținute de biserică au început să părăsească conferința. Bishop s-a retras din conferință în 1956, Langston în 1957 și Huston-Tillotson (fostă Samuel Huston) în 1959. Acest lucru s-a întâmplat la un an după ce alte două școli susținute de stat au intrat în ligă (Grambling College și Jackson State College). Ciclul de intrare-ieșire a continuat în 1961, când Texas College s-a retras, urmat de intrarea lui Alcorn A&M în 1962. Wiley a plecat în 1968, în același an în care a intrat Mississippi Valley State College. Arkansas AM&N a ieșit în 1970, iar Alabama State University a intrat în 1982. Arkansas-Pine Bluff (fostă Arkansas AM&N) a revenit în SWAC la 1 iulie 1997, redobândind statutul de membru cu drepturi depline un an mai târziu. Alabama A&M University a devenit cel de-al zecelea membru al conferinței când a devenit membru cu drepturi depline în septembrie 1999, după o perioadă de un an ca membru afiliat SWAC.
Competiția actuală a campionatului oferit de SWAC include competiția pentru bărbați în baseball, baschet, cross country, fotbal, golf, atletism în interior, atletism în aer liber și tenis. Competiția pentru femei este oferită în sporturile de baschet, bowling, cros, golf, atletism în sală, atletism în aer liber, fotbal, softball, tenis și volei.
