Más tarde, el padre de Chen endureció su corazón y dejó de cuidar de su segundo hermano y su familia. Como resultado, cuando los hijos del segundo hermano cayeron enfermos y fueron hospitalizados, la culpa recayó sobre el padre de Chen. Toda la familia culpó al padre de Chen e incluso derribaron al pobre Chen Lidong, haciendo que su cabeza sangrara en el acto.
Por supuesto, el joven Chen Lidong no recordaba todo esto, pero fue durante este tiempo que la relación entre las dos familias empezó a agriarse. Aunque el padre de Chen todavía los visitaba durante las fiestas, dejó de hablar con su hermano y su cuñada. La familia del segundo hermano criticaba constantemente a Chen Lidong por sus malos estudios, afirmando que era poco inteligente y sin potencial.