Для этого настройки интернета нужно прописать на Вашем «модеме», тогда он будет раздавать интернет на все 4 порта, если этот «модем» является пассивным коммутатором, то настроить таким образом не получится – купите вместо него маршрутизатор. Если нужно купить быстро, то в салонах Евросети есть маршрутизаторы Tenda.
Еще проверьте на каждом компьютере настройки сетевых адаптеров, оптимально установить получение IP и DNS – автоматически.
Могу подключиться по TeamViewer, посмотрю, как настроено сетевое подключение.