其实绿芜自从来到林皎月身边开始伺候她开始，林皎月就偶尔会跟绿芜提出想听沈以岸的身世这个说法。
绿芜知道的很多，但也只是挑一些江南百姓都知道的事情告诉林皎月，对沈以岸个人的禁忌仍旧只字不提。
沈以岸的父亲沈允书性格懦弱，从来都是当和事老的角色，总被人欺负，幸好母亲倒是一个强势的女人，母亲和父亲的性格互补，但是父亲也落下了“需要女人保护”的名声。
一直深爱母亲的父亲，开始慢慢和母亲疏远，母亲并不知道原因，但是这也是两个人感情破裂的开始。
沈以岸的母亲在生他的时候落下了病根，但是这个病反反复复一直不见好转，为了医治母亲的病花了许多钱。
直到沈以岸十岁那年，在那个最需要母亲的年纪，自己深爱的母亲真的永远离开了他。
但是父亲给沈以岸的感觉却是特别开心母亲的离开，并且没过三年，父亲又娶了一个家里很有钱的富商小姐，一是因为父亲说穷怕了，二是因为富商小姐愿意给父亲一笔钱，让他做一个买卖，父亲选择了盐行。
当然，买卖是成功了，但是父亲却永远失去了曾经那个将他当成是自己的天的孩子，也就是沈以岸。
后来富商小姐和父亲结婚，生育一女取名沈悦瑶，沈以岸便在十五岁的时候离开了家，一个人到江南走出了自己的一片天下，从此名扬四海。
林皎月带着众人朝沈以岸后娘佟秀蝶行礼，道：“夫人老爷千里迢迢前来拜访，是我们有失远迎还请见谅。”
佟秀蝶听见林皎月说话，便望过去眼神中满是不屑：“这是我们一家的事情，哪有你说话的份？真是什么样的主子就有什么样的下人，简直就是一点的规矩也不懂得！”
父亲沈允书轻声示意佟秀蝶少说两句，但是她和根本没听见似的，反而更加变本加厉，“我少说什么呀？怎么？我说说我自己的儿子也不行吗？我又没有说别人，难道，是别人心虚了不成？！”
沈以岸微微抿嘴，三缄其口，对眼前的事情不发表任何言论。
但是佟秀蝶就以为沈以岸的沉默是因为懦弱，仍旧不依不饶地说着。
“夫人，请您说话三思。”林皎月实在听不进去了，沈园里的丫鬟和小厮们都十分敬重沈以岸，听到有人这样诋毁沈以岸，大家都敢怒不敢言，只是林皎月把大家心中的话都说出来。
“哟？你是什么人？敢和我顶嘴？”佟秀蝶拉着女儿走上前，活生生一个泼妇的形象。
“你是沈园的管家？我见你的手白白净净、细皮嫩肉的，恐怕不是管家这么简单吧？你一定是他私藏的女人！”
佟秀蝶怎么可能不知道沈以岸和顾迟婉的婚约，虽然是娃娃亲，但是既然有一席婚约就不可能置之不理。
所以她这样捏造，就是想要扯沈以岸的小辫子，如果事实确实如此的话，顾家会最先讨厌沈以岸，而坐收渔翁之利的就是佟秀蝶。