tudo o que o pessoal disse esta correto, rotear seu modem é o mais barato, mas tem um "se" na ai.
Se não puder rotear o seu modem e, dependendo do modelo, não vai conseguir, precisa realmente comprar um roteador.
Pode ser um D-link com 4 saidas (assim, dispensa hub, switch...), custa em torno de R$ 100,00 e não R$ 200,00.
Se for pra comprar um switch e gastar R$ 30,00, compre logo o roteador e deixe o modem em paz.
Se não quiser gastar isso, com R$ 25,00 vc coloca duas placas de rede em um PC e um cabo cross conectando um ao outro e compartilha a conexão no PC que esta ligado ao modem, mas ai, como dito acima, o computador que esta ligado ao modem deve estar sempre ligado para que o outro computador acesse a internet.
Essas são suas opções:
Se Rotear seu modem = R$ 00,00
Se comprar um roteador = R$ 100,00
Se cmprar uma placa de rede e usar um cabo cross = R$ 20,00
(caso um dos pcs tenha duas conexões de rede, apenas use o cabo cross)
(aqui a um gasto maior de energia, pois um pc tem de estar sempre ligado)