Наличие у Wi-Fi роутера USB-порта с поддержкой возможности подключения 3G/4G модемов сильно упростило бы задачу, но если такового нет, а тратить деньги на покупку нового роутера не хочется, то, как вариант, можно воспользоваться таким способом. Минусом такого подключения, является то, что раздачи Wi-Fi интернета конечно же не будет при выключенном компьютере.
Если в двух словах, то задача сводится к тому, чтобы на компьютере предоставить общий доступ к подключению к мобильному интернету, и указать на роутере в качестве шлюза сетевую карту компьютера.