iOS14から allowsHitTesting() を利用する方法だと Toggle も操作不可になるようになった。
iOS13と同様の挙動を実現するには、disableな場合にonEnded等で何もしないクロージャーを返すようにする。
詳細は ContentView.swift 参照
allowsHitTesting() を利用して、 Gesture が発火するかどうかをハンドリングするサンプル
ToggleがONのときはViewをダブルタップすると背景色が切り替わるToggleがOFFの場合はViewをダブルタップしても何も起きない

