Το μοναστήρι βρίσκεται νοτιοανατολικά της Ανώπολης, μέσα σε ένα καταπράσινο περιβάλλον. Αρχικά ήταν μετόχι της Μονής του Αγίου Γεωργίου, αλλά λόγω των αλλεπάλληλων πειρατικών επιδρομών που ελάμβαναν χώρα τον 15ο και 16ο αι. οι μοναχοί το εγκατέλειψαν και εγκαταστάθηκαν στην Μονή του Αγίου Ιωάννη του Θεολόγου. Στο μοναστήρι αυτό λειτουργούσε κρυφό σχολείο στα χρόνια της Τουρκοκρατίας και έπαιξε σημαντικό ρόλο στις διάφορες επαναστάσεις κατά του τούρκικου ζυγού. Γι' αυτό το λόγο οι Τούρκοι κατέστρεψαν τη μονή τον Ιούλιο του 1896 και έσφαξαν τους καλόγερους και τους κατοίκους της Ανώπολης. Λίγα χρόνια μετά, η μονή επανιδρύθηκε από τον Καλλίνικο Δασκαλάκη.
Σύμφωνα με την παράδοση, η μονή χτίστηκε το δεύτερο μισό του 17ου
αιώνα (μεταξύ 1660 -70) από τρεις μοναχούς του Αγίου Αντωνίου στους Γαληνούς, μετά την καταστροφή της μονής τους από πειρατές. Βρίσκεται στα όρια του Δήμου Τυλίσου, ένα περίπου χιλιόμετρο πριν το Φόδελε, σε μια περιοχή με πυκνή άγρια βλάστηση. Είναι φρουριακού τύπου και περιβάλλεται από τείχος. Δίπλα από την πύλη υπάρχει εντοιχισμένη, μαρμάρινη επιγραφή με χρονολογία 1677 (η ίδρυση της μονής τοποθετείται λίγα χρόνια πιο πριν) και στο υπέρθυρο επιγραφή με χρονολογία 1861 (τότε έγινε μεγάλη ανακαίνιση από τον ηγούμενο Νεόφυτο Πεδιώτη). Έξω από τη μονή, 100 μέτρα δυτικά της εισόδου, σώζεται θολωτή δεξαμενή νερού (χτίστηκε το 1866 όπως μαρτυρεί η εντοιχισμένη επιγραφή), με μια παλιά κρήνη μπροστά της. Σήμερα στον Άγιο Παντελεήμονα ζει μόνο ένας μοναχός.
Το μοναστήρι του Αγίου Παντελεήμονα είχε πάντα ανοιχτές τις πόρτες του στους επαναστάτες και γι' αυτό υπέστη επανειλημμένα καταστροφές από τους Τούρκους. Το 1824, λεηλατήθηκε και καταστράφηκε από τους Τουρκοαιγυπτίους του Χουσεϊν. Το δεύτερο χρόνο της επανάστασης του 1866, πυρπολήθηκε από τους άνδρες του Ρεσίτ Εφέντη. Ωστόσο, στη μεγαλύτερη καταστροφή της μονής οι Τούρκοι δεν είχαν καμία ανάμειξη. Το 1972, κατεδαφίστηκαν το ηγουμενείο και όλα τα κελιά των μοναχών, πλην δύο. Λέγεται ότι ο λόγος που υπαγόρευσε αυτή την ενέργεια ήταν η προσδοκία ανεύρεσης θησαυρού, που πιστευόταν ότι ήταν θαμμένος στα θεμέλια της μονής. Ο σεισμός της 11ης Ιανουαρίου 2006 τα αποτελείωσε.
Η μονή του Αγίου Γεωργίου του Γοργολεήμονος βρίσκεται σε υψόμετρο 480 μέτρων κοντά στο χωριό Κάτω Ασίτες, και ήταν αυτή που επιβίωσε περισσότερο από τα υπόλοιπα μοναστήρια της περιοχής, κατά τις διάφορες επαναστάσεις την περίοδο της Τουρκοκρατίας.
Αποτελεί ένα σημαντικό μοναστήρι που υπάρχει τουλάχιστον από τα χρόνια της Ενετοκρατίας. Η αρχαιότερη μνεία της ανάγεται τον 14ο αιώνα. Το καθολικό είναι αφιερωμένο στον 'γιο Γεώργιο ο ναός του οποίου αποπερατώθηκε το 1627.
Κατά την περίοδο της Τουρκοκρατίας υπήρξε κέντρο επαναστατικών κινημάτων, αλλά και εξαιρετικό θέρετρο με τεράστιες βελανιδιές που καλύπτουν ένα μεγάλο τμήμα του περιβόλου (δύο από τα δέντρα αυτά, ο πλάτανος και το κυπαρίσσι, έχουν κριθεί «διατηρητέα μνημεία της φύσης»). Καθώς η μικρή μοναστική κοινότητα επιμένει να μη χρησιμοποιεί μικρόφωνα και ηλεκτροφωτισμό στην εκκλησία, οι λειτουργίες και οι εσπερινοί εδώ, διατηρούν την αυθεντικότητα του παρελθόντος. 'ξιο αναφοράς είναι το παλιό ξυλόγλυπτο τέμπλο, έργο λαϊκής εκκλησιαστικής ξυλογλυπτικής του 19ου αιώνα ενώ τα παλιά κελιά έχουν αντικατασταθεί, καθώς στη μονή λειτούργησε για χρόνια κατά τη δεκαετία του 1960 η παιδική κατασκήνωση της Ιεράς Αρχιεπισκοπής Κρήτης.
Στο περίβολο του μοναστηριού μπορεί να δει κανείς την προτομή του γενναίου οπλαρχηγού Φραγκιά Μαστραχά ο οποίος σε ηλικία 75 ετών, σκοτώθηκε το 1868 σε μάχη εναντίον των Τούρκων στις Ασίτες. Επίσης, στην κρήνη της μονής υπήρχε ένα μαρμάρινο λιοντάρι, από την εποχή της Ενετοκρατίας, το οποίο όμως κλάπηκε το 1990.
