他娘郑秀芬给宠幸了，他娘怕大夫人周静雅知道，直到肚子藏不住了，再说出来，周静雅本想了结了他娘，又不想坏了自己的郡主身份，留下善妒的坏名声，一来二去，过了许久，他娘将他生下了，周静雅只得将他娘抬为了芬姨娘，给了观澜院这个小院，观澜院原先只是个下人的院子，题了名，让郑秀芬母子住。
郑秀芬长的只算是小家碧玉，不得楚昌健多少宠爱，也不去蓄意争宠，只安安分分的呆在观澜院，守着楚无双。因着是周静雅嫁入楚家后，第一个怀了孩子的人，被周静雅记恨，生下孩子后，便被人灌了红花，伤了身子，再也怀不了孕，也无人给孩子取名，郑秀芬便给孩子取名无双。
楚无双母子生活艰辛，周静雅时不时的克扣，让观澜院的生活过的十分清苦，别的主子身旁伺候的人至少是二十个，而观澜苑总共也才两人。一个丫鬟绿荷伺候郑秀芬起居，一个小斯冬青伺候楚无双。