“安達曼”（Andaman）這個名字來自Handuman，是馬來語對印度猴神Hanuman的稱謂。
中國古籍中，較早對該群島的記錄，有《大唐西域求法高僧傳》卷下義凈自述行程，記載尼科巴群島，稱之為“倮人國”，指島民以椰子、芭蕉、藤竹器來求換鐵器，大如兩指的鐵可換得椰子五至十個。又說島上居民都不穿衣服，婦女只以片葉遮形，即使商人給他們衣服也不要。又記島上居民“容色不黑、量等中形”，以“盧呵”（鐵）最珍貴。如果對方不願貿易，就會放毒箭殺害對方。
宋人趙汝適《諸蕃誌》“海上雜國”條，稱“晏陀蠻國，自藍無裏去細蘭國，如風不順，飄至壹所，地名晏陀蠻，海中有壹大嶼，內有兩山，壹大壹小，其小山全無人煙，其大山周圍七十裏。山中之人身如黑漆，能生食人，船人不敢艤岸。山內無寸鐵，皆以硨磲蚌殼磨铦為刃。”又指島上有聖跡渾金床，承壹死人，有大蛇保護，經代不朽。又指島上有井會流出聖水，凡水流過的沙石都會變成金。
《瀛涯勝覽》錫蘭條稱之為“案篤蠻”，指“自帽山南放洋，好風向東北行三日，見翠藍山在海中，其山三四座，惟壹山最高大，番名案篤蠻山”，又指島上的人“巢居穴處，男女赤體，皆無寸絲，如獸畜之形。土不出米，惟食山芋、波羅蜜、芭蕉子之類，或海中捕魚蝦而食。”又傳說當地人如果有寸布在身就會生爛瘡，原因是以前佛陀在此澡浴時衣服被島民偷掉，因此被咒不能穿衣。