La primera prueba de la presencia judía en Aviñón data del siglo IV. Se trata de un sello que representa una menorá de cinco brazos y que lleva la inscripción «avinionensis». El comercio judío fue muy activo en la época de los papas. El sastre de Gregorio XI era judío, al igual que su encuadernador.
Durante la epidemia de peste negra de 1348, la comunidad de Aviñón se salvó gracias a la enérgica intervención de Clemente VI. Las ordenanzas de 1558 ofrecen una descripción de la organización de la comunidad. Sus miembros se dividían en tres categorías según su riqueza. Los baylons, por ejemplo, se encargaban de la recaudación de impuestos, la caridad, los enfermos y la enseñanza. A partir del siglo XVII, los judíos se dedicaron principalmente al comercio de mercancías de segunda mano y de caballos. Tras la incorporación de la ciudad a la República Francesa en 1791, el número de judíos en Aviñón disminuyó rápidamente. En 1892, solo quedaban cincuenta y cuatro familias. La llegada de los sefardíes en la década de 1960 revitalizó la comunidad.
Avignon vio nacer y residir a figuras que dejaron huella en la literatura hebrea. Entre las más conocidas, cabe destacar a Kalonymos ben Kalonymos, autor de Even Bohan (La piedra de prueba), que ofrece una sátira de la vida de los judíos de Provenza en la Edad Media, así como a Levi ben Gershom (Gersónide).
El barrio judío de Aviñón estaba situado frente al Palacio de los Papas. La calle de la Vieille Juiverie es un vestigio de ello. Hacia 1221, se trasladó a la plaza de Jerusalén (hoy plaza Victor Basch). El barrio se encontraba en la calle Jacob, donde aún se pueden ver algunas de sus casas. Estaba rodeado de murallas y cerrado por tres puertas.
La antigua sinagoga fue destruida por un incendio en 1845 y sustituida por una nueva, de forma circular, que se puede visitar en la actualidad.