Stedet har stor strategisk betydning; det kontrollerer adgangen til Calavon-dalen. Den har været beboet siden forhistorisk tid og var et oppidum i romersk tid.
I middelalderen forlod indbyggerne sletten og bosatte sig omkring den befæstede by.
Under Anden Verdenskrig var landsbyen Gordes et aktivt modstandscenter mod besættelsesmagten. Den blev bombet den 22. august 1944, og et dusin huse blev sprængt i luften som hævn for en tysk soldats død, der blev dræbt af modstandsmænd.
Det eksisterende slot stammer fra det 10. århundrede og blev ombygget i renæssancen. Under religionskrigene modstod Gordes, der var solidt befæstet, angrebet Baron des Adrets, en grusom huguenothøvding, der rasede med sit ødelæggende raseri over klosteret Senanque.
Denne imponerende borg dominerer landsbyen Gordes. Det stammer fra det 10. århundrede og blev ombygget i renæssancen. Du kan besøge den og det museum, som den huser, Pol Mara-museet, moderne flamsk maler og indbygger i Gordes.
Den frygtelige usikkerhed på grund af de mange invasioner i århundredernes løb tvang landbefolkningen til at søge tilflugt på højderne. Det var oprindelsen til disse landsbyer på bakketoppen. Disse befæstede byers strategiske værdi varede gennem hele middelalderen og en del af renæssancen, især under religionskrigene.
I dag er Gordes en af de syv smukkeste landsbyer i Frankrig i departementet Vaucluse. Landsbyen, der er kendt verden over, fortjener på grund af sin usårlige atmosfære navnet akropolis-by og er på en udvalgt plads blandt Luberon-områdets vagtbyer.