说詹世钗与结婚多年的中国妻子相依为命，不过后来妻子早逝，到了1871年，詹世钗在造访澳大利亚期间，于悉尼公理会结识了一位来自英国的妇女凯瑟琳桑特利，之后两人结婚。婚后，两人生育了两个孩子，埃德温和欧内斯特。对于这种说并没有太多的记载，但是詹世钗的确是与英国人结婚。
在史料记载中，詹世钗后代中的确是有一子名为詹泽纯。据说，长人之子詹泽纯并没有遗传到他父亲的身高。詹泽纯长大后在英国驻沪领事馆工作，詹世钗曾告诉过詹泽纯他的老家在江西婺源县浙源乡虹关村。詹泽纯也回来寻过亲，但是他的叔伯是做生意的，有巨额家产，怕詹泽纯回来认亲分割家产，便否认了自己是他的亲人。之后，詹泽纯直到詹世钗去世，也再没回去过。