先說答案：可以。

其他回答都和無線有關，鑑於樓主沒有提到無線的事情，預設所有路由器和貓都是用網線連線。

四樓的貓出來一條線連電腦直接可以上網的前提下，如下設定就可以：

1.四樓的貓出來一條網線連線三樓路由器的WAN口，三樓路由器的設定只要IP和貓不一樣就可以（比如光貓地址是192.168.1.1，那路由器地址就改成192.168.3.1，只要第三位換個數就可以了），另外上網方式設定成動態IP（比較省事，靜態IP可可以，但需要手動設定下IP地址），並開啟DHCP功能。

2.三樓路由器的LAN口出來一條線連線二樓路由器的WAN口，二樓路由器的IP地址和三樓路由器及光貓的IP地址都不一樣，上網方式同樣設定成動態IP，開啟DHCP就可以了。

另一種情況：貓連出一條網線到電腦，在電腦上撥號才能上網：那三樓的路由器的上網方式改成PPPOE模式，其餘設定都一樣就可以了，但是你四樓的電腦直接連線貓就不能上網了，需要從三樓引一條線上來才可以。