吳榮德出身清貧，自小就投身社會，慶幸賢內助一直支持他。他們育有一子，現今已經投身社會，而且兒子從小就會與吳榮德一起做義工。有次他兒子到廣州參加軍訓後，學懂嚴守紀律，尊重別人。雖然不算富裕，但熱愛家庭及國家的家訓始終謹記於心。