uGUIのCanvasにCanvas Group コンポーネントを追加して、Blocks Raycastsのチェックを外す。 こうするとIsPointerOverGameObject()の対象から外すことが出来ます。