בית יוסף, אורח חיים קנא:י

ואפי' לאחר שחרבו עדיין הם בקדושתם וכו' עד וישתדלו לבנותה משנה וברייתא שם: כתב המרדכי פרק בני העיר ב"ה נקרא מקדש מעט ולכך אסור לנתוץ דבר מבית הכנסת דתניא בספרי מנין לנותץ אבן מן ההיכל ומן המזבח ומן העזרה שהוא בלא תעשה ת"ל ונתצתם את מזבחותם וגו' לא תעשון כן לה' אלהיכם ואם נתץ ע"מ לבנות שרי דההיא נתיצה בנין מיקרי עכ"ל: