Если кратко - у вас должен быть модем-роутер, телефонным кабелем соединенный с входной телефонной линией, а двумя круглыми проводами (витая пара) - с 2-мя компами через линейнеые входы "Порт 1...4".
Модем нужно настроить в режим "роутер" (по умолчанию он всегда в режиме "бридж" - "мост"). Поскольку модемы разные по маркам - нужно искать в Инете самой инструкцию типа "настроить модем такой-то в режим Роутер".
Вот пример сайта, где указаны настрои в роутер наиболее популярных марок модемов:
RouterHelp.ru , смотреть "Настройка PPPoE", сетевые карты пока пропускаем.
Затем у обоих компов нужно настроить сетевые карты,
см. процесс тут для Винды-Семерки
причем IP-адрес каждого компа не должен иметь одинаковые последние две цифры, а различаться на единицу:
у модема адрес будет 192.168.1.1
у первого компа - 192.168.1.2
у второго компа- 192.168.1.3
какие вводить Предпочитаемый DNS-сервер и Альтернативный DNS-сервер - нужно позвонить и узнать у своего местного интернет-оператора.
Всё сохранить, компы перзагрузить - по идее компы отныне будут работать параллельно и независимо друг от друга в Инете - загорятся зелененькие диоды модема в подключенных "Порт 1" и "Порт 2". Интернет будет подключатся автоматически с загрузкой Винды - нужно лишь открыть свой браузер на компах.