רש"י על פסחים ג:

אין בודקין - לענין יוחסין לישא אשה:

מן המזבח ולמעלה - אם שימש במזבח אין צריך לבדוק למעלה הימנו דאם לא היה ראוי לכהונה לא היו מניחין אותו לשמש כדתנן במסכת מדות (פ"ה משנה ד') לשכת הגזית שם היו יושבים ב"ד מיחסי כהונה ולויה כל כהן שנמצא בו פסול כשהיה רוצה להתחנך לעבודה לובש שחורים ויוצא: