Conectar router a modem telmex

Buenas mis estimados, recientemente me cambié de cuarto(si, rento cuarto), y el internet es de Telmex, el módem no lo puedo ver pero hay un cable ethernet que cae directo a mi cuarto, quise conectar mi router pero este no me da internet, ¿alguien sabe si tengo que configurar algo en especial? gracias!