natürlich funktioniert das.
Bei beiden Routern aktivierst du einfach Mesh-On-LAN. Dann kannst du die beiden an den LAN-Ports (Gelb) miteinander verbinden. Den der erste hängst du mit mit dem WAN-Port an die FritzBox.
Theoretisch verbinden die beiden Router sich auch per WLAN miteinander, wenn sie nicht zu weit auseinander stehen.