Die Antwort ist einfach: Kannst du abhaken.
Auf welchem Weg sollte deine Fritzbox denn zur anderen Fritzbox Kontakt aufnehmen? Brainpower? Teleportation? Im Klartext heisst das: Wenn du zwei Netzwerkgeräte (in deinem Fall zwei Fritzboxen) irgendwie miteinander vernetzten willst, dann müssen sie auch eine Netzwerkverbindung irgendeiner Art haben. Also entweder zu ziehst ein Kabel von der einen Wohnung zur anderen... oder du hängst viele viele viele Repeater auf um von einer Wohnung zur anderen zu kommen

... oder zu wählst dich in ein Netzwerk ein, zu dem auch die andere Fritzbox Zugriff hat... nennen wir es mal Internet.
Du kannst es drehen und wenden wie du willst.