shattered-blog.com

投稿記事数[8790]以上!ゲーム,PC,カメラ,動画などを、アヤしゐ「專門妖語」を使ッて解説スル!

[Bing] search.msn.com - crawlerの来訪集計 [Apache]

投稿日:

あるサイト(ココではない)の、ロボット来訪の集計結果を公表する。

期間:2017年1月1日~9月26日

ロボット集計_2017年9月26日

・googlebot.com:37,769
・search.msn.com:333,183
・crawl.baidu.com:2,657
・twttr.com:1,547

情弱シか使わなゐ貧愚(Bing)のCrawlerである「search.msn.com」、相当アクシツ(AXIS)ぢャなゐ?

鯖の負担になるし、AWSのような転送料が別途かかる(従量制)だと、カネにも影響する。

スィナの黴土(Baidu)のCrawlerである「crawl.baidu.com」は、昔はAXIS杉田が、今はソーでもナイン(NINE)?

ムァ、こンなもン、イクラでも偽装できるンで...

robots.txtのような紳士協定のようなモンではなく「.htaccess」でDenyし、鯖に負荷が掛かる前に排除しなければならない。

AXISなCrawlerの時だけページを出しわけるようなモンでは、鯖に負荷が掛かるので意味ナイ!

辻 秀典 渡辺 高志 鈴木 幸敏 できるシリーズ編集部
インプレス
売り上げランキング: 192,337
インプレスR&D (2017-05-26)
売り上げランキング: 35,780
鶴長 鎮一
技術評論社
売り上げランキング: 116,112



ソニー・インタラクティブエンタテインメント
2018年12月発売 20タイトル収録
セガゲームス
2019年9月発売 42タイトル収録
セガゲームス
2019年9月発売 42タイトル収録
コナミデジタルエンタテインメント
2020年3月発売 58タイトル収録

-インターネット, サイト制作・管理
-, , ,

Copyright© shattered-blog.com , 2019 All Rights Reserved.