然而，当玉环10岁之时，厄运降临到她的头上，他的父亲病逝。玄琰去世时，一手摸着小玉环的头，一手拉着妻子的手，瞪着无神的双眼，无力地环视着站在旁边的几个孩子，一遍又一遍地嘱咐妻子：一定要坚强地活下去，把孩子们抚养成人。玄琰咽气的时候，目光停留在小玉环的脸上，似有千言万语要说出来，却一句也没说得出。
玄琰死了，抚养孩子，承担家事等重担一下落在妻子的头上。玄琰的妻子是个柔弱的妇女，实在承受不住这巨大的悲哀和压力。玄琰死后，她又勉力支持了一年多时间，也终于一病不起，与世长辞。这时，玉环只有12岁。
没有了父母疼爱的玉环变得沉默寡言，失去了往日的欢乐，人也变得消瘦多了。虽然上面还有哥哥姐姐，但他们毕竟也是孩子——只不过稍大一些，根本不懂得如何照顾妹妹。于是，从河南洛阳赶来办理丧事的杨玄琰的小弟杨玄璬，在征得妻子同意后，将玉环领回洛阳家中抚养。