后来，苏老太爷把生意做得越发的风生水起了，在鱼龙混杂的上海也算是有了一席之地，他们全家人也搬进了白公馆。
可是就在那一年，他的娘亲生病走了，苏老三的娘亲也因为感染风寒去世了，第二年连苏老太太也走了，整个白公馆只剩下他们三父子还有个妹妹，也就是和苏南昇同胞的妹妹。
他对那个妹妹没什么感觉，只知道重男轻女的观念对于他家老爷子来说真是不起作用的。
苏老爷子很宠爱苏南昇那个妹妹，还把她送到洋学堂去上学，什么都顺着她的心意来，可他和苏老三却是只能跟着私塾先生天天念着那些艰涩难懂提不起半分兴趣的古文。
再后来，他和苏老三当了玉石店的学徒，书没得念了，天天起早摸黑的根本不像是养尊处优的少爷，他们很是记恨，可终究只有嫉妒的份。
虽然后来苏南昇的同胞妹妹好像因为一个男人，不顾苏老爷子的反对嫁了人，差点没气死身体还算是硬朗的他。
可苏南元却对那件事乐见其成，是因为那件事，他们也才逐渐进入了苏老爷子的眼，慢慢地在苏家的地位才高了那么一点。