L'arrivo di Phillips a Houston portò anche un cambiato della difesa degli Oilers, che passò da una del tipo 4-3 a quella 3-4. Quest'ultima si rivelò ideale per sfruttare la combinazione di stazza e velocità di Brazile. Mentre molti citano Lawrence Taylor come prototipo dell'outside linebackerpass rusher nella NFL[3], ci sono altri, incluso Phillips, che ritengono Brazile il primo outside linebacker inviato a mettere pressione sul quarterback avversario[4]. Questi giocò bene anche nella copertura sui passaggi e sulle corse, guidando spesso la squadra in tackle anche se gli avversari evitavano spesso il suo lato.
Brazile ebbe immediatamente successo con gli Oilers, venendo premiato come rookie difensivo dell'anno per la stagione 1975. Fu convocato per sette Pro Bowl consecutivi, inserito nella formazione ideale della stagione All-Pro per cinque anni consecutivi (1976–80) e inserito nella formazione ideale della NFL degli anni 1970. È l'unico linebacker di quella formazione ideale a non essere stato indotto nella Pro Football Hall of Fame. Nel 1978 e 1979, Brazile fu un membro chiave degli Oilers che raggiunsero due finali della AFC consecutive.
Dopo la terza sconfitta consecutiva nei playoff del 1980, Phillips fu licenziato dal proprietario degli Oilers Bud Adams e la squadra entrò in un periodo di declino. Le successive sconfitte misero in Brazile il pensiero del ritiro[5]. Tuttavia, disse, fu la perdita in un incidente stradale della sua prima moglie, Cookie, a Houston nel 1984, a fargli prendere quella decisione.
Ufficialmente, Brazile terminò la sua carriera con 11 sack. Non ufficialmente invece gli furono attribuiti 48 sack, poiché questi non vennero rilevati come statistica ufficiale prima del 1982. È stato calcolato in carriera abbia messo a segno 1.281 tackle, il secondo massimo della storia degli Houston Oilers/Tennessee Titans[6].