Da, se poate. Introduci cablul de internet in portul WAN al routerului, dupa care, cu un cablu secundar mufat la ambele capete, introduci unul din capetele acestuia in portul LAN al routerului, iar celalalt capat in placa de retea a pc-ului.
http://compnetworking.about.com/od/homenetworking/ht/routerconfigure.htm - citeste in special punctele 3 si 4.
Se face exact cum ai zis tu. Oricum, un router wireles snou nu il poti configura si utilzia la inceput decat pe fir, deoarece pe wifi nu poate fi configurat initial(cand nu e configurata securitatea si restul).