Для меня лично данная фраза - это некое пусть и косвенное, но унижение и оскорбление. В смысле, не меня лично, а вообще в принципе.
Неважно, кому так говорят. Но такого человека (или людей) - кому говорят, явно хотят оскорбить, обидеть и указать на место. В смысле, что ценность его (или их) для говорящего нулевая. И он себя считает выше того (или тех), кому это говорит.
По сути - это манипуляция. Демонстрация своей власти. Человека (или людей) т.о. заставляют молча делать то, что нужно манипулятору под угрозой применения к ним санкций. Обычно увольнения.
При этом говорящий обычно не задумывается над тем, что он тоже, в принципе, может не иметь большой ценности для тех, кому это говорит. И его очень рады бы заменить. Вопрос только в возможности рычагов влияния и воздействия. И были бы они у тех, кому это говорят, скорее всего, они поменялись бы местами.
На самом деле - совершенно любой человек ценен и уникален. Тот, кто для нас лично неценен или даже вреден, для кого-то другого может быть самым лучшим и единственным на свете.
И только потеряв кого-то, остро ощущаешь образовавшуюся брешь и начинаешь ценить (часто уже пост-фактум) все, что было связано с этим человеком. И его вклад в нашу жизнь - неважно, личную, профессиональную, соседскую или какую еще.