Σύμφωνα με μία παράδοση, ένας τσοπάνος έχασε μία ετοιμόγεννη κατσίκα. Ύστερα από μέρες, όταν τον έπιασε μία δυνατή βροχή, μπήκε μέσα σε μία σπηλιά να προφυλαχτεί. Εκεί βρήκε την κατσίκα που είχε για χαμένη, με το νεογέννητο μικρό της. Εκτός από την κατσίκα του, όμως, βρήκε και μία εικόνα της Παναγίας, την οποία, μόλις έπαψε η βροχή, πήρε μαζί του στο Αρβανιτοχώρι, όπου μαζεύτηκε όλο το χωριό να την προσκυνήσει. Το άλλο πρωί, όμως, η εικόνα έγινε άφαντη. Νομίζοντας ότι κάποιος την είχε κλέψει, ο τσοπάνος επέστρεψε στις εργασίες του, αλλά περνώντας από τη σπηλιά, μπήκε μέσα και είδε την εικόνα εκεί. Το βράδυ ξανά την έφερε πίσω στο Αρβανιτοχώρι, αλλά το πρωί επανελήφθη το ίδιο σκηνικό. Τελικά, πεπεισμένος ότι η Παναγία δεν ήθελε να αφήσει τη σπηλιά, ο τσοπάνος έχτισε έναν τοίχο στην είσοδό της, έβαλε και μία πόρτα, έφτιαξε ένα εικονοστάσι, και έφτιαξε μέσα στη σπηλιά την εκκλησία της Παναγίας της Ποταμίτισσας.