Все зависит от предполагаемого состава сети.
Формально, если соедините два компьютера сетевым проводом, то сеть уже будет. Поскольку у вас нет специального ообрудования, то на каждом компьютере нужно будет прописать данные соединения.
Например так у компьютера 1 будет ip-адрес 192.168.0.1, а у второго 192.168.0.2 остальные параметры одинаковы: маска подсети 255.255.255.0, основной шлюз: 192.168.0.1.
Если планируется более 2 компьютеров, то нужно купить специальное устройство - коммутатор. Они бывают управляемые (свич) и неуправляемые (хаб). Для вашей сети это не важно. Далее поступаем просто - соединяем все компьютеры с коммутатором - и настраиваем ip адреса по аналогии.
Если компьютеров предполагается использовать существенно больше, то стоит подумать о более серьезном оборудовании вместо коммутатора - маршрутизатор (роутер). После минимальной настройке по инструкции можно сделать так, что не будет требоваться настраивать параметры сети на каждом компьютере - маршрутизатор сделает это за нас.
Ну и напоследок устройство локальной сети у меня в квартире:
Мой рабочий ноубук соединен с стационарным компьютером через хаб. Хаб, ноутбук жены и домашний сервер подключены в роутер, который принимает от провайдера интернет, раздает его на все наши компьютеры, ну и дополнительно он раздает wi-fi на телефоны и плашнеты.