常州盛氏是江淮一带的大姓，代代都有贤人。到了清朝，先是盛宣怀的祖父盛隆于嘉庆年间中举，当上了浙江海宁知州，接着他的父亲盛康于庚子（1840年）中举，进而在甲辰（1844年）考中进士，获得了封建社会的最高学历，当上了湖北武昌盐法道（分管食盐产、运、销的副省长），成了地方实力派。
盛康任职湖北，对于盛家来说最直接的影响是，这期间李鸿章正奉命攻打太平天国，盛康参与操办后勤军务，甚得赞赏，这就为后来他的儿子盛宣怀进入李鸿章的幕府打下了“伏笔”，也为这个家族后来的振兴，做好了最重要的人事铺垫。
盛家两代人居外做官，俸禄日增，家底渐厚，盛宣怀的父亲和叔父就在常州城里买地造屋，建起了前后九进的深宅大院。在盛宣怀的父亲盛康快要告老还乡的时候，又在苏州买下一处偌大的旧式园林，精心修整后，作为盛家的别墅和祠堂所在地。这处园林，就是现在号称苏州四大园林之一的留园。
数年后盛宣怀青出于蓝而胜于蓝，发迹后也在故乡大兴土木，在常州周线巷建起了前后十一进的大宅院。盛家在常州的两处豪宅相距不过百米，威严显赫，时人莫不称羡。
盛家虽也可谓是书香门第，但祖父两人都比较注重社会实际问题的研究，对孩子的“学历”教育抓得不是很紧，盛宣怀有时随父亲居住官邸，开阔眼界，增长见识；有时回到老家盛氏府第，攻读经书，接受传统教育，其间，他也并非心无旁骛，而是经常参与设义庄、增祭田、建义学、修宗谱等具体事务的规划。成长于这样一种环境的盛宣怀，八股文章了了，应试能力平平，所以他在1866年考中秀才后，乡试三次不中。然而，盛宣怀落榜不落志，慨然以匡时济世自期，从此绝意科举，积极致力于“有用之学”，对天下之事，均“事事研求”。
盛宣怀毕竟是一个有家庭背景的人，虽然没有正规文凭，但“找工作”并非难事，1870年，26岁的盛宣怀经人推荐，来到湖广总督李鸿章幕府做了机要秘书。
他处理日常公牍倒是应付裕如，当年在他父亲的衙署内就曾协助老人家处理过事情。他办事机灵，是个干才，来到李鸿章的麾下不负厚望，吃苦耐劳，精明练达，克勤克俭，很快获得李鸿章的好感。初“派委行营内文案兼充营务处会办，属槖鞬（tuó jiān），侍文忠”，是秘书、兼总务处副处长的角色，直接对李鸿章负责。
他到李鸿章在陕西的行营后不久，天津教案发生，奉朝廷之命，部队立马向天津开拔。时值盛夏酷暑，部队常常要“日驰数十百里”，“涉函关，登太行，尽揽山川扼塞形胜”，遇到紧要的公文，盛宣怀能“磨盾草檄，顷刻千言”，同僚们无不刮目相看。不久，他就升任陕甘后路粮台淮军营务处，继而又因军功升任知府、道员，并获赏戴花翎二品顶戴的荣誉。此时距他入李鸿章戎幕，仅一年有余，可见李鸿章对他的器重。
历来江南的达官贵人或是富豪人家，在发迹之后，总想到苏州这个地方买一处产业，或深巷小院，或水边大宅，作为休闲养老之处。盛家也是如此。盛康在盛宣怀跟上李鸿章之后的第三年（1873年）就在苏州城外寒山寺附近，买下了一处占地35亩的大园林，这就是现在被誉为中国四大古典园林之一的留园。这是盛康留给其后代的最大的一份不动产。
留园的来历是这样的。当年太平天国攻打苏州的时候，在城外放了一把火。大火连烧三天三夜，苏州城满目焦土。正在风声鹤唳之际，人们发现西城外有一处绿地安然无恙，池水依旧湛蓝，高枝照样连理。后来人们弄清了，这是明朝万历年间太仆寺少卿徐泰时的园林，后来被清代嘉庆年间的柳州、庆远知府刘恕买了下来，苏州人称之为刘园。
这场兵灾过去若干年后，盛康看中了这块劫余之地，视之为风水之胜，斥银买了下来，加以修缮整饬，很快，这里楼台迤逦相属，嘉木秀而繁荫。因苏州老百姓过去一直称其为刘园，不方便改口，盛康与盛宣怀商量下来，决定仿照袁子才的随园的办法，取谐音，变“刘”为“留”，于是就以留园称之，取“长留天地”之意。
盛康买园后没几年（即1877年），李鸿章在给朝廷的一份奏折里就对他的儿子盛宣怀大加褒扬，说他“心地忠实，才识宏通，于中外交涉机宜能见其大，其所经办各事皆国家富强要政，心精力果，措置裕如，加以历练，必能干济时艰……”盛宣怀前程远大，将来必能建一番功业，使盛家家声远扬，“长留天地”了。