Dobrý den,
ten kabel co vám vede z modemu zasuňte do routeru, konkrétně do portu WAN.
Budete potřebvat ještě jeden kabel s RJ4 konektorem.
Ten připojíte do dalšího portu routeru.
Router nastavte na AP.
Nastavte SSID to je název vysílané sítě (ta se bude zobrazovat v seznamu dostupných WiFi sítí).
Do routeru nastavte IP od poskytovatele a zapněte NAT.
Nastavte aby vám router přiděloval IP automaticky.
Nastavte zabezpečení, šifrování (WEP, nebo jaké podporuje router) a zadejte silné heslo sítě.
Jinak u každého routeru je návod jak jej zprovoznit.
Bohužel já vašeho výrobce a označení routeru neznám, abych byl přesnější a zadal přesnější postup.
Pokud máte UPC

tak nepoužívejte pro propojení jejich RJ4 kabel !!
Dobrý návod jsem nalezl třeba zde:
http://jenda9net.chytrak.cz/vytvarime_domaci_wifi.php