关于吉隆“达曼人”的说法很多。据相关资料记载，达曼人这一称谓来源与骑兵有关系。“达”的藏语意译为“马”，“曼”的藏语意译为“军”或“多”，“达”和“曼”合并起来为“骑兵”，“达曼人”的藏语意为“古代骑兵的后裔”。
有一种说法认为，在1791年7月，尼泊尔部落之一廓尔喀以西藏地方毁约为由，发动了第二次入侵西藏吉隆、绒辖、聂拉木等边境地区的战争。为了抗击外敌，清朝zf派遣福康安大将军率领由满、汉、蒙古、达斡尔、鄂温克、鄂伦春等数十个民族组成的大军，千里迢迢进藏讨伐廓尔喀军。清军收复吉隆、聂拉木、绒辖等边境失地后，长驱直入吉隆与尼泊尔交界的热索，经过浴血奋战，取得了胜利。
整个战斗中，除了死伤的大量清军外，还有数以千计的将士失足跌入幽深的谷底，或失踪在浩瀚的密林中，其中有数百余骑兵。由于当时的通信和交通不便，他们便一直滞留在边境，再也没有回到故土。这些残存的将士在人烟稀少的崇山峻林间被困长达一年多，仅依靠野果、飞禽、小野畜、山泉等生存。其中被饿死、冻死的达90%以上，之后幸存下来的也仅有100余人。
在漫长的岁月中，这些将士与尼泊尔边境上的人共同居住繁衍在喜马拉雅山南麓的边境小镇——日喀则地区吉隆县吉隆镇，而达曼人就是他们的后裔。
但当地的藏族人和在当地做生意的尼泊尔人则认为，这些长相具有南亚人种特征的人，不是“真正的”“达曼人”或“达芒人”，他们就是“索瓦”或“嘎米”，意为打铁的人。尼泊尔人和尼泊尔的藏族人也称这部分人为“嘎米”。
西藏民主改革前，在整个藏族聚居区，铁匠的地位极其低下。不论在我国藏族聚居区还是尼泊尔，当地人都歧视达曼人，一般不与其通婚。
从2003年开始，我国zf承认这部分人的国籍后，不再称呼其有歧视含义的“嘎米”或“索瓦”，而改称之为“达曼人”。这对于达曼人来说是一个可以载入史册的特殊日子。这一天，他们正式加入中国国籍，成为中国公民。至此，达曼人结束了饱尝辛酸、居无定所的历史。
值得一提的是，在与异民族交友、交往方面，只有40%的达曼人有汉族朋友，但有79%的人和汉族交流。由于达曼村只是吉隆镇的一个自然村，98%的达曼人与当地的主体民族藏族有不同程度的联系和交往。当前，当地很少有尼泊尔来的达曼人，98%的达曼人特别是年轻人没有尼泊尔朋友。在交友意愿上，72%的达曼人最相信达曼人，首选藏族做朋友的占18%，首选汉族的占9%。对待与异民族通婚的态度上，91%的达曼人认可和汉族通婚。
当前达曼人和汉族通婚的情况多是烂娘嫁给前来打工的汉族。在他们看来，嫁给汉族有以下优点：第一，在2003年以前，嫁给汉族可以得到国籍，享受中国公民待遇；第二，汉族小伙不酗酒，不打老婆，勤俭持家；第三，嫁给汉族后就有可能进入内地打工或生活，改善自己的生活状况。另外，有33%的达曼人认为可以和尼泊尔人通婚。