A Língua de Sinais Americana foi trazida da França para os Estados Unidos no século XIX. Laurent Clerc foi o primeiro professor de surdos na América e ajudou a estabelecer o sistema para ensinar indivíduos surdos.
O filósofo grego Sócrates afirmou no século V a.C. que era normal surdos se comunicarem com as mãos. Entre 1520 e 1584, Pedro Ponce de León desenvolveu gestos para ajudar na educação de surdos.
Juan Pablo Martin Bonet foi erroneamente nomeado "pai da língua de sinais" entre 1579 e 1629. Ele atribuiu a si mesmo o trabalho de Pedro Ponce de León.
Entre 1715 e 1780, Jacob Rodriguez Pereira ajudou a espalhar o sistema de Ponce de León para surdos por muitas partes da Europa. No início do século XIX, o Instituto Nacional para Surdos-Mudos na França foi fundado por Abbé de l'Épée, que nomeou o sistema de Ponce de León como Língua de Sinais Francesa Antiga (LSFA).
Aproximadamente 60 sinais da Língua de Sinais Americana vieram da Língua de Sinais Francesa Antiga. Em 1817, Thomas Gallaudet trouxe a língua para a América do Instituto Nacional para Surdos-Mudos, onde estudou sob Laurent Clerc.
Em 1817, Gallaudet e Clerc abriram a primeira escola para surdos nos EUA, chamada Asilo de Connecticut para a Educação e Instrução de Pessoas Surdas e Mudas, localizada em West Hartford, Connecticut.
A legenda fechada (closed captioning) tornou-se disponível em 1980. A escrita na parte inferior da tela permitiu que surdos lessem o que era dito na televisão.