民國首富盛宣懷：當年傭人就有二百七十七，今後世子孫家徒四壁

然而，龐大的家族和莊園不僅難以打理，還會招來各方紛爭。盛家曾兩次被迫向朝廷捐款，民國三年時，盛家還被迫捐款50餘萬兩白銀。1927年，江蘇省政府下令將盛家愚齋義莊財產的四成上繳國庫，充作軍需。即使多次被迫捐款，盛家的財大氣粗絲毫未受影響，直至最後沒落時，盛家仍然擁有1000萬兩白銀的家底。

在上世紀30年代，盛家走向衰落，解放後，盛家子孫漸漸沒落。在2009年的采訪中，盛家後人盛四小姐的長孫邵祖丞透露，盛家後人不僅完全失去了昔日豪門的光景，甚至過得相當清貧。