Το πανηγύρι της Παναγίας Κρυφτής γιορτάζεται πάντα μετά την Κυριακή του Θωμά. Ακολουθεί θεία λειτουργεία στο μικρό εκκλησάκι που βρίσκεται μέσα σε βράχους στα πιο απόκρημνα νοτιοδυτικά παράλια της Λέσβου και η πρόσβαση γίνεται με καΐκια- βάρκες ή με αυτοκίνητο που το αφήνεις για να περπατήσεις ένα μονοπάτι και όπως έχει το έθιμο όσοι επιθυμούν πηγαίνουν με το άλογο. Μετά ακολουθεί γλέντι στη παραλία της Μελίντας και τελειώνει στο Παλαιοχώρι ως αργά!
