Περί του μοναστηριού (του Αγ. Ιωάννου Θεολόγου εις Χάλακα) αυτόν υπάρχει ο εξής θρύλος εκ των οποίον επήρε το όνομα : «Αγ. Ιωάννης ο Σιδεριαννός». Ευρισκόμεθα εις την εποχήν των πειρατών. Οι Μήλιοι και οι Κίμωλιοι επανηγύριζαν, όταν μεταξύ αυτών τινές διέκριναν αγνώστους. Οι άγνωστοι ούτοι ήσαν πειραταί. Τότε έντρομοι οι πανηγυρίζοντες έσπευσαν προς την εκκλησίαν, έκλεισαν τις πόρτες και παρακαλούν τον Άγ. Ιωάννην. «Άϊ Γιάννη μου σιδέρωσε την πόρτα.» Όντως η πόρτα δια θαύματος του Αγίου εσιδέρωσε και οι πειραταί δεν ηδυνήθησαν να εισέλθουν. Κατόπιν αυτού εις των πειρατών ανήλθεν εις τον θόλον του ναού όπου υπήρχε οπή δια της οποίας επέρασε το πιστόλι και το χέρι του έτοιμος να πυροβολήση προς εκφοβισμόν την εντός του ναού καταφυγόντων. Διά νέου θαύματος του Αγίου απεκόπη η χειρ του πειρατού και έπεσε μαζί με το πιστόλι εντός του ναού. Κατόπιν αυτού φοβηθέντες οι πειραταί έφυγον, οι πανηγυρισταί δεν ενθαρρύθέντες εδοξολόγησαν τον Άγιον και συνέχισαν το πανηγύρι των. Το πιστόλι του πειρατού φυλάσσεται ως δείγμα του θαύματος εις το μοναστήρι.