Νότια της Νεάπολης, σε πλαγιά του βουνού Καβαλαρά και σε υψόμετρο 397μ., βρίσκεται η Μονή Κρεμαστών. Η ονομασία της συνδέεται με την φρουριακή αρχιτεκτονική και την τοποθεσία της που την κάνουν να μοιάζει σαν να κρέμεται από την πλαγιά.
Σύμφωνα με την επιγραφή, τη μονή ίδρυσε ο Μητροφάνης ο Αγαπητός, το 1593. Αν και αρχικά ήταν ανδρικό μοναστήρι, μετά το 1993 μετατράπηκε σε γυναικείο.
Το μονόχωρο καμαροσκέπαστο καθολικό είναι αφιερωμένο στους Ταξιάρχες και διαθέτει ένα επιχρυσωμένο ξυλόγλυπτο τέμπλο. Ιδιαίτερη όμως είναι και η Αγία Τράπεζα που χρονολογείται στο 1622.
Επίσης, έξω από το μοναστήρι υπάρχει και ένας ακόμα μεταγενέστερος ναός αφιερωμένος στις Μυροφόρες.
Το μοναστήρι από την αρχή σχεδόν της λειτουργίας του υπήρξε πολύ δραστήριο: κατά τα χρόνια της Τουρκοκρατίας εδώ λειτούργησε σχολείο, ενώ μέχρι σήμερα λειτουργεί εργαστήριο Αγιογραφίας.