Στην προέκταση του λόφου των Καρυών, που βρίσκεται το Μοναστήρι του Αγίου Ραφαήλ στη Λέσβο, εκτείνεται η λοφοσειρά του Παλαμά όπου βρίσκονται σπήλαια στα οποία ασκήτευαν τα παλαιότερα χρόνια πολλοί μοναχοί.
Στο βιβλίο «Η εύρεσις της εικόνας του Αποστόλου Φιλίππου» της Βασιλικής Ράλλη, αναφέρεται ότι επί τουρκοκρατίας στο σπήλαιο του Αγίου Φιλίππου, γύρω στο 1850 συνέβη μία θαυμαστή αποκάλυψη. Ένας βοσκός ονομαζόμενος Χριστόφας ήταν βοσκός στις βουνοσειρές του «Παλαμά». Μαζί με την ευσεβή γυναίκα του Μαρία, πήραν για ψυχοπαίδι τον ορφανό Φίλιππο που τους βοηθούσε στις δουλειές. Ένα βράδυ όμως ο 15χρονος τότε Φίλιππος εξαφανίστηκε και από τότε δεν ξαναγύρισε στο σπίτι.