Facebookの正式URLは全くクロールしない

Question

私のFacebook OG-Tagsの問題について怒っているし、私の大学のgoogle noreもどちらもまだ私を助けないだろう。 問題は、TYPO3拡張機能を使用して、Open Graphic Meta TagsをFacebookのベストプラクティスルールで要求されている形式で生成することです。だから、私たちのホームページにメタタグは、次のようになります。

<meta property="fb:app_id" content="1076994975680778" /> 
<meta property="og:title" content="Startseite" /> 
<meta property="og:type" content="website" /> 
<meta property="og:image" content="https://www.syncomnet.com/template/Resources/Public/images/icons/scn_facebook.png" /> 
<meta property="og:image:type" content="image/png" /> 
<meta property="og:image:width" content="250" /> 
<meta property="og:image:height" content="250" /> 
<meta property="og:url" content="https://www.syncomnet.com/home.html" /> 
<meta property="og:site_name" content="SynComNet" /> 
<meta property="og:description" content="Personalplanung/Personaleinsatzplanung/Dienstplan mit PersPlanNet ERP Software von SynComNet" /> 
<meta property="og:locale" content="de_DE" /> 

問題は、Facebookのロボットは全くのページをクロールしないこと、です。それはあなたがここに見ることができるように私たちのホームページをクロールした後、完全に空のページになり：

https://developers.facebook.com/tools/debug/echo/?q=https%3A%2F%2Fwww.syncomnet.com%2Fhome.html

私は今、クローラが取得、ホームページのソース全体をコピーして、静的test.htmlという中で、それを貼り付けるとページ。私は変更する必要が唯一のものはOGで正規のURLです：URLメタプロパティ...

<meta property="og:url" content="https://www.syncomnet.com/test.html" /> 

...とロボットは何の問題もなく動作します。

https://developers.facebook.com/tools/debug/echo/?q=https%3A%2F%2Fwww.syncomnet.com%2Ftest.html

問題は、CMSによって生成されたすべてのページがどのような方法でクロールされていないこと、です。私もrobots.txtが "/"を許可するだけで問題になるかどうかテストしましたが、これは影響ありません。エラーはどこにありますか？どうもありがとうございます！

Answer 1

私はもう少し近づいています。フェイスブックロボットはgzip圧縮を処理できないようです。

<IfModule mod_filter.c> 
    AddOutputFilterByType DEFLATE application/atom+xml \ 
     application/javascript \ 
     application/json \ 
     application/ld+json \ 
     application/manifest+json \ 
     application/rdf+xml \ 
     application/rss+xml \ 
     application/schema+json \ 
     application/vnd.geo+json \ 
     application/vnd.ms-fontobject \ 
     application/x-font-ttf \ 
     application/x-javascript \ 
     application/x-web-app-manifest+json \ 
     application/xhtml+xml \ 
     application/xml \ 
     font/eot \ 
     font/opentype \ 
     image/bmp \ 
     image/svg+xml \ 
     image/vnd.microsoft.icon \ 
     image/x-icon \ 
     text/cache-manifest \ 
     text/css \ 
     text/html \ 
     text/javascript \ 
     text/plain \ 
     text/vcard \ 
     text/vnd.rim.location.xloc \ 
     text/vtt \ 
     text/x-component \ 
     text/x-cross-domain-policy \ 
     text/xml 
</IfModule> 

私は私の.htaccessに次のセクションをコメントアウトした場合

は... ... Facebookのスクレーパーが正常に動作します。問題：このセクションはTYPO3によってデフォルトです。私は現在、facebookロボットの例外を追加する方法を自分自身で探しています。