妻罗氏——1871年迎娶，婚后三月罗氏病卒。

妻马氏——约1896年续娶，生二女、二子（汉林、汉森），不久马氏病卒。

妻岑氏——约1902年续娶，生二子（汉枢、汉熙），不久岑氏病卒。

妾莫桂兰——1915年续纳。

1919年 精通武术的次子黄汉森遭妒，在广西梧州渡任“护勇”时被“鬼眼梁”暗算惨死。受此打击，飞鸿不再向其他儿子传授武技。

莫桂兰像

黄汉熙像