закройте доступ к папкам и дискам если у вас он открыт
потыкайте(войдите) на компьютеры которые в сети там могут быть прикольные фотки)
Проверьте настройки такой службы как "Брандмауэр Windows", возможно, в нем стоит запрет на соединение. Проверьте наличие других файрволов. Если ничего не получится, трясите компанию, которой вы платите за интернет, и пусть не отмазываются. Если, по их словам, они интернет подают, то пусть сделают так, чтобы вы этот интернет получали.
если в сети нет DHCP-сервера, то на телевизоре и на компе IP-адреса необходимо прописать вручную. Для простоты настройки, стоит указывать адреса, входящие в одну подсеть; например: 192.168.1.2 и 192.168.1.102
Из вопроса не понятны Ваши познания в интересующем Вас вопросе и что именно Вы вкладываете в наречие "как"
Небольшая сеть это относительное понятие, 3-4 компьютера небольшая сеть, а вот для пяти компьютеров неплохо бы и сервер наладить и домен подключить.
Для компьютерной сети лучше использовать свич, так как роутер предназначен больше для раздачи интернета и подключать роутер в сети нужно непосредственно в свич, так же проверьте все соединения, может быть просто плохо обжат кабель, ну и конечно не мешало бы вычистить операционные системы от мусора или лучше все заново переустановить и поставить одинаковые ОС поддерживающие работу локальных сетей.
Зайди в тотал командор открой вся сеть и проверь все компы намести или нет а если сеть открыта для всех пользователей то можешь полазить по другим компам