Muhtemelen fiber kullanıyorsunuz. Bu mümkün değil. PPPOE destekli router kullanmak zorundasınız.

Modeme bağlı olan kabloyu kasaya taksam modemi o ara kullanmayacağım. İnternete bağlana bilirmiyim?

Kısaca, hayır. Modemin de bir amacı var. O amaç, size İP atayabilmek. Modem olmadan İP alamazsanız, Dolayısıyla internete de bağlanamazsınız.