Вероятно, потому, что вот эта приставка
воспринимается как "ниже нормального", "меньше нормального".
И значит
воспринимается как недоразвитый.
Отсталый, то есть.
В обычном, чаще всего используемом контексте - отсталый умственно.
То есть, дурачок, дурак, недоумок.
В лучшем случае, недоучка.
Ну а такая низкая оценка умственных способностей многими людьми воспринимается как оскорбительная.
Вероятно, потому, что в человеческом обществе интеллект ценится высоко.
Как-то так.