Bereishit Rabbah 100:7

בראשית רבה ק:ז

A community...resembles a heap of stones: One stone taken out of it and the whole totters.

חֲבוּרָה...כָּךְ הֵן דּוֹמִים לְכִפַּת אֲבָנִים, אַתְּ נוֹטֵל מִמֶּנָּה אֶבֶן אַחַת וְכֻלָּהּ מִתְרוֹעַעַת