Μέσα στη σπηλιά υπήρχε σκήτη, αφιερωμένη στον άγιο Αρσένιο, που τη χρησιμοποιούσαν οι μοναχοί της μονής του αγίου Ιωάννου της Βέλλιανης, η οποία καταστράφηκε γύρω στα 1870. Σήμερα διασώζεται μέσα στη σπηλιά τμήμα της σκήτης και παλιά αγιογραφία στο βράχο.
Πριν 30-40 χρόνια μια ομάδα νέων τότε ανθρώπων, από τα κοντινά χωριά με πολύ κόπο ανακατασκεύασαν την σκήτη σε μικρό εκκλησάκι και άρχισε να εορτάζεται κάθε χρόνο η γιορτή του Αγ. Αρσενίου.

