Ο ψαράδικος οικισμός της Γούπας είναι από τους πιο γραφικούς του νησιού. Εντύπωση προκαλούν τα "σύρματα", που είναι σπηλιές πελεκημένες στον μαλακό βράχο, όπου φυλάσσονται οι βάρκες.

Σε απόσταση ενός ναυτικού μιλίου και προς τα ΝΑ της Κιμώλου βρίσκεται η νήσος Πολύαιγος (= νησί των πολλών αιγών), ή Υπόλυβος, ή Πόλυβος, με έκταση περίπου 18 τετρ. χιλιόμετρα. Πρόκειται για το μεγαλύτερο ακατοίκητο νησί του Αιγαίου και ένα από τα μεγαλύτερα της Μεσογείου.

Το Χωριό, χτισμένο στους πρόποδες του Ξαπλοβουνιού, έχει μεγάλη έκταση και διακρίνεται σε δύο τμήματα: Ο παλιότερος οικιστικός πυρήνας είναι το μεσαιωνικό κάστρο, του 14ου ή 16ου αιώνα, με τετράγωνο σχήμα, που αποτελείται από δύο συγκροτήματα σπιτιών (το ένα περικλείει το άλλο) και μια μικρή σειρά σπιτιών στο κέντρο, πλάι στην οποία σχηματίζεται μικρή πλατεία και υπάρχει ο Ναός Της Γεννήσεως Του Χριστού.  Τα σπίτια είναι χτισμένα με τη σκληρή πέτρα της περιοχής (σιδερόπετρα), ενώ υπάρχουν διακοσμητικές λεπτομέρειες από «πώρι».

Το Αρχαιολογικό Μουσείο της Κιμώλου βρίσκεται στο Χωριό, απέναντι από τον Μητροπολιτικό Ναό της Παναγίας της Οδηγήτριας. Στεγάζεται σε ένα παραδοσιακό διώροφο οίκημα, από τα παλαιότερα του Χωριού.  Στον 1ο όροφο του κτιρίου, σε 3 αίθουσες συνολικής έκτασης περίπου 65 τετρ.