Ο Πύργος βρίσκεται στην βορειοδυτική ακτή της Γαύδου, 6km βορειοδυτικά του λιμανιού στην Καραβέ.
Στον Πύργο υπάρχουν δύο διπλανές σμαραγδένιες αμμουδερές παραλίες, οι οποίες είναι εντελώς ανοργάνωτες και απομονωμένες. Πολλοί τις επιλέγουν για κατασκήνωση, καθώς είναι πολύ μακριά από οποιαδήποτε τουριστική υποδομή. Οι παραλίες είναι κρυμμένες στην καρδιά ενός μεγάλου κόλπου με αμμόλοφους και κέδρους, που προστατεύονται από παντού με απότομους γκρεμούς.
Μπορείτε να έρθετε στο Πύργο μόνο με τα πόδια ή με βάρκα. Η πεζοπορία από την Άμπελο διαρκεί 2-2.5 ώρες, ενώ η κατάβαση στην παραλία γίνεται από ένα απότομο μονοπάτι το οποίο είναι απαιτητικό.
Επίσης, μπορείτε να οδηγήσετε σε ένα κακό χωματόδρομο που οδηγεί σε ένα σημείο κοντά στην παραλία και να περπατήσετε από εκεί. Όποια λύση κι αν ακολουθήσετε, ένα είναι το σίγουρο: η πρώτη βουτιά στα πεντακάθαρα νερά του Πύργου με το άγριο τοπίο τριγύρω, θα σας μείνει αξέχαστη. Σε καμία περίπτωση μην ξεχάσετε να έχετε μαζί σας νερό και φαγητό.
