Gli High Back Chairs si sono formati a Washington nel 1989 grazie al chitarrista Peter Hayes, al batterista veterano Jeff Nelson (Minor Threat), al bassista Charles Steck (Velvet Monkeys) e al secondo chitarrista Jim Spellman (un futuro membro dei Velocity Girl).

Of Two Minds (Dischord, 1991) introduce il loro boom power-pop con canzoncine brutali come Miles To Inches e Doldrums.

L'EP Curiosity And Relief (Dischord, 1992) riprende il loro primo singolo, Share.
Nello stesso anno Jeff Nelson lascia la band e viene rimpiazzato da Blair Lee Elrod.
Nel 1993 la band si è definitivamente sciolta.