La Asociación Internacional de Semiótica Visual nació a partir de un intercambio de ideas entre Michel Costantini y Göran Sonesson durante el congreso de la Asociación Internacional de Semiótica que se realizó en Perpiñán, en el sur de Francia, en 1988. La Asociación Internacional de Semiótica Visual (International Association for Visual Semiotics, en inglés, Association internationale de sémiotique visuelle, en francés, las tres lenguas oficiales de la Asociación), cuya sigla es AISV-IAVS, fue oficialmente fundada como asociación según la ley francesa en 1989 en Blois, Francia, donde tuvo lugar su primer congreso internacional en 1990. El evento reunió en esa ocasión más de un centenar de semióticos visuales provenientes de todo el mundo. Se la llamó en ese entonces Asociación Internacional de Semiología de la Imagen, o AISIM, y su nombre fue cambiado en 1992.
Como se indica en su nombre (semiótica visual), el objetivo principal de la AISV es reunir a semióticos de todo el mundo que se interesan en las imágenes y, en términos generales, en la significación visual, sin privilegiar ninguna interpretación particular de la semiótica, y sin favorecer alguna tradición semiótica en particular.