ネットワークに詳しい方ご回答いただけると幸いです。 私はネットワーク初心者で、勉強をしています。 O

ルーター①、ルーター②はどんなルーターなのですか。家庭用のルーターだと質問のようなネットワーク構成に対応できないかもしれません。
最初の状態だとルーター①、ルーター②は共にプロバイダからIPをもらってインターネットに繋がります。デバイス①からデバイス②へつなぐには、ルーター①でLAN側からの192.168.1.1/24へのアクセスをルーター②へ転送する設定をしなければいけません。このときルーター②はMACアドレスで指定するか、プロバイダから取得しているIPで指定しないとつながりません。家庭用ルーターだとこのような個別のルーティング設定ができるか不明です。なお応答を届かせるために逆にルーター②からルーター①へ転送する設定も必要です。
あとサブネットマスク20ビットにする設定はソフト(設定)的なネットワーク境界と物理的なネットワーク境界が一致しないのでおかしなことになるでしょう。不安定になるのは当然と思います。

＞対処法としてL3SWというHUBに変え、ルーティングの設定をすれば良いということですが、

ルータ①が繋がるVLAN、ルータ②が繋がるVLANの間をルーティングすることになるのですが、よくよく考えれば、PPPoEだろうがIPoEだろうがトンねリングしているので、ルーティングで繋がらないな、と思い始めました。勢いで書いてしまってすいません。

HUBがL3SWであるならば、そこにルーティングを設定してください。
この規模で動的ルーティングも無いでしょうから、静的ルートで十分。
　route 192.168.11.0/24 ルータ①のWAN側IP
　route 192.168.1.0/24 ルータ②のWAN側IP

HUBがL2SWであるなら、各ルータからインタネットにセションが張られているのではないでしょうか。
ここでデバイス①、②間の通信をさせる場合にはインタネットを介したルーティングとなります。しかしながら、クラスCプライベートIPアドレスはインタネット上でルーティングできない（してはいけない）ので、ISPではしてくれません。

PPPoE接続であれば、ルータ①で、ルータ①のWAN側IPv4アドレスをデバイス①にNAT、ルータ②でルータ②のWAN側IPv4アドレスをデバイス②にNATさせます。
デバイス①はルータ①のWAN側IPv4アドレスをアクセスすることでデバイス②と通信できます。通信は行って戻ってこれてナンボですから、デバイス②はルータ②のWAN側IPv4アドレスをアクセスすることでデバイス①と通信できるようになります。

IPoEであれば、ISPは基本無関係。以下、IPoEによるIPv6トンネルでIPv4通信をする場合。

方式がTransix（DS-LITE）であれば、VNEのAFTR（あなたのルータはB4）でNAPT44されますので、VNEが上記の対応しない限り無理です。VNEのグローバルIPは複数の顧客でシェアされていますのでやってくれません。
方式がMAP-Eであれば、CE（あなたのルータ）にIPv4グローバルIPが割り当てられていますので、NATのマッピングは可能ですが、動的IPなのでいつ変わるかわかりません。更に使える（TCPやUDPの）ポート番号はIPv6アドレスから生成された240個に制限されていますので、LANからインタネットに抜けるのはともかく、逆方向はまともな待ち受けはできません。固定グローバルIPであればポート番号制限は無いとのこと（未確認）。

IPv6アドレス同士での通信であれば上記のような制限はありません。払い出されたIPv6アドレスは全てグローバルIPです。それでも無闇にインタネット側から通信できないよう、どこで規制をかけているかと言えば、ルータ（やHGW）であったり、Windows Firewallです。

多分、何を言っているのかさっぱり分からないと思いますが、「PPPoE 宅内サーバ公開」とか、「IPoEルータ間インタネットVPN接続」のようなキーワードで探せば、もう少し親切に解説されていると思います。

・ONUとハブは二つ書かれてるけど全く同じもの(2つ回線契約しているわけでなくルーター①②に枝分かれしてるだけ)
・ルーター①②は片方ずつインターネットにそれぞれIpv6、Ipv4接続したい、でもローカルでは両方ともIpv4接続可能
という前提で良いですよね。
ご指定の設定で全く問題ないように思いますが、あとはルーターやデバイスのセキュリティで弾かれていないかが気になります。最近のルーターであればWAN側から来るPINGパケットは当然のように破棄したり、Windowsもファイアウォールが既定で有効になりますが、一時的に無効にしてこれらが悪さしていないかは確認する必要があります(その際はONUの電源を落とすかケーブルを抜くことをお勧めします)。

このような構成にする目的がわかりませんが、よほど古い/安いルーターでもない限りIpv6/v4は共存でき、ブラウザ等アプリケーション側でもv6が使えないときにv4に自動フォールバックするような挙動をする(設定により様々に変えらえる)ので、基本的には普通の構成をお勧めします。ルーター1台でデバイス側にハブを置くようにすればあまり悩む必要はありません。

原則2回線の回線契約が必要ですが理解していますか?。
1回線の契約だと色んな問題が起きる可能性を内包します(ISPの想定外の接続になるので…)。
勉強が目的ならONU→ルーターAのWANポート、ルーターAのLANポート→ルーターBのWANポートに接続し2段ルーターの構成にするのが正しいかと。

> プロバイダからのipで指定する場合というのは、送ったデータは一度インターネットを通ることになるのでしょうか。

もしかするとONUを超えてプロバイダまで届くかもしれませんが、2つのルーターが同じプロバイダに繋がっているならそこ止まりです。
基本的にはハブ①経由でARPをブロードキャストして相手ルータが応答するので、あとはイーサネットパケットでハブ①経由で相手ルータに届きます。この場合、パケットはONUを超えないでしょう。
ただルーター①はIPoEで、ルーター②はPPPoEでインターネット接続をしているということで、その状態で同時に普通のイーサパケットをWAN側(ハブ①)へ送れるのかどうかは知りません。上手くいかないと全てのパケットがプロバイダを経由するかもしれません。そうなった場合で、さらにルーター①とルーター②の接続先プロバイダが異なっていれば全てのデータがインターネット経由となるでしょう。