Этимологический словарь Крылова
Образовано как уменьшительное от щупало – "щуп", производного глагола щупать.
щупальце
Щупальце
ЩУПАЛЬЦЕ