Слово килограмм только в форме именительного и винительного падежа единственного числа имеет форму с нулевым окончанием. А слово мандарин при числительных, начиная с цифры 2, находится всегда в форме родительного падежа единственного или множественного числа. Просклоняем слово "килограмм" вместе с мандаринами:
и.п. что? килограмм мандарин-ов
р.п. вкус чего килограмма мандарин-ов, пяти килограмм-ов мандаринов;
д.п. дам чему? килограмму мандарин-ов, пяти килограмм-ов мандаринов;
в.п. куплю что? килограмм_ мандарин-ов, пять килограмм-ов мандарин-ов;
т.п. восхищаюсь чем? килограмм-ом мандарин-ов, пятью килогамм-ами мандарин-ов;
п.п. думаю о чем? о килограм-е мандарин-ов, о пяти килограмм-ах мандарин-ов.
В названиях овощей и фруктов "мандарин", "апельсин", "лимон", "томат", "помидор" употребляется в родительном падеже окончание -ов. Точно также изменяется слово "килограмм" в форме родительного падежа множественного числа. Усеченные формы килограмм_ апельсин_, мандарин_ являются просторечными, то есть за границей литературного языка.
Хотя существуют и такие нормативные формы:
килограмм груш_, яблок_, слив_, то есть в названиях отечественных фруктов.