Vamos por partes.
El router es el que se conecta como cliente PPPoE.
El hecho de tener un router entre tus máquinas y el exterior ya es un tipo de defensa porque nadie puede acceder a tu ordenador si tu no lo invitas lanzandoo una petición desde dentro.
Cada vez que apagas y enciendes el router te uede cambiar la IP pública.
Si quieres funcionar directamente como cliente PPPoE desde el ordenador tendrías que poner el router solo como modem (bridge), establecer una nueva conexión siguiendo las instrucciones del vista eligiendo la correspondiente a PPPoE (no sé al detalle como se hace en vista) y poniéndole usuario y contraseña de tu proveedor. Seguramente dedespués tengas que elegir en el navegador lo de marcar una conexión.
El problema es que así si que te va a quedar expuesto el ordenador a cualquier ataque desde el exterior.
Además solo podrás conectar un ordenador.
Yo no te lo recomiendo.
Es más fácil que desconectes el cable o que deshabilites la conexión.