Если уж быть точным, то собирательные числительные употребляются:
1) с названиями детей и детёнышей животных: двое малышей, трое щенят;
2) с названиями лиц мужского пола: двое студентов, трое ребят;
3) с названиями парных и составных предметов: двое носков, трое чулок, четверо сандалет, валенок;
4) с названиями существительных, имеющих только форму множественного числа: двое щипцов, трое ножниц, четверо саней;
5) с субстантивированными прилагательными и причастиями: трое отдыхающих, двое военных.
6) с личными местоимениями : нас трое, вас двое.
Так что двое, трое, четверо...десятеро НОСКОВ, гольфов и чулков. Выбирайте, сколько вам нужно.
Вполне вы можете сказать :"У меня только два носка".
Но тут есть такая фишка, что желательно в косвенных падежах, то есть во всех, кроме именительного падежа, употреблять КОЛИЧЕСТВЕННЫе числительные вместо собирательных.
Я любуюсь двумя носками( а не двоими), я куплю две пары носков, я думаю о двух носках и я собираю по квартире три, четыре, пять пар носков.