Отшельником зовут скорее всего по определению слова "отшельник"- добровольно подвергнувший себя одиночеству.
Их дом" состоит из заброшенной раковины, или иногда они проживают внутри губок или трубок червей, на манер греческого философа или отшельника Диогена, который жил в винной бочке.