惠徵一死，杏兒家就落到了極困難的境地之中。杏兒在宮裡那不得見人的去處熬著當蘭貴人的日子，杏兒的額娘——惠徵太太富察氏帶著杏兒的那個小名叫婉兒、大名叫婉貞的妹妹和那三個弟弟——照祥、桂祥、福祥在北京西單牌樓劈柴胡同那個窮得只剩了個空架子的舊宅子中，瞪著眼苦捱苦過。

那幾年，瑞麟家又著實照顧了他們。瑞麟在道光三十年（1850年），當上了禮部侍郎，咸豐元年（1851年）又兼任了滿洲鑲藍旗副都統，正好管著惠徵家所在的旗分，所以瑞麟用打他手中經過的從官中撥給旗下的糧餉著實做足了人情，哪個月不讓惠徵的那兩個沒成年的小兒子、也就是杏兒的那兩個還不能當兵應差的小弟弟照祥和桂祥頂著八旗親軍或者前鋒的名義每個人都堂而皇之地關好幾份兒俸銀和俸米？杏兒就是再顧家，可是她那時在宮裡什麼權勢也沒有、除了幾兩銀子的月錢之外再也碰不到錢的邊兒，也難從宮中挪出錢來貼補家用，因此瑞麟的“義舉”可真幫了惠徵家的大忙。

咸豐三年（1853年）瑞麟調任戶部侍郎，那一年的一天，杏兒這個蘭貴人第一次被當今皇上給召幸了。瑞麟和瑞麟夫人一見杏兒在宮中有出頭之日了，越發存心跟惠徵家聯絡，不時地送些銀錢、禮物給杏兒的額娘惠徵太太、她的那個還沒出閣的妹妹、還有她的那三個弟弟。

　　王采蘩聽到這兒，不禁微微一笑，彷彿無可形容她對這千奇百怪的炎涼世態的感慨。她搖了搖頭，將她正撫弄在右手中的那把薄絹摺扇放到了左手中，然後她伸出右手從填漆茶盤中嫻雅地舉起了那把影青瓷的茶壺，替潘士望夫人將小茶鍾裡的茶水添滿。潘士望夫人將話鋒停頓了片刻，看著王采蘩略略點了點頭，但是她並不忙著喝茶，而是將手中的團扇在臉頰旁