A ver explicanos un poco mas, me imagino que estas usando el modem para conectarte a internet y el router como un hub, es asi?
Si es eso, usa el asistente de configuracion de red de windows xp, el lo hace todo sin mucho problema.