米Googleは2011年1月21日、検索エンジンスパム、とりわけ近年増加傾向にあるコンテンツスパム対策のためにアルゴリズムを改良したことを明らかにした。
Principal EngineerのMatt Cutts氏によると、近年、純粋なウェブスパムが減少傾向である一方、新たに内容が薄っぺらで低品質なコンテンツを掲載する「コンテンツファーム」に関心が集まっている。2010年にGoogleはこうしたサイトが検索上位に表示されないようにアルゴリズムの改良を実施しているが、必ずしも十分に機能しているわけではないのが実情だ。検索利用者からのこうした声を受けて、アルゴリズムの更なる改善に踏み切った。
今回、同社は新たにドキュメントレベルのスパム検出強化を行い、スパムコンテンツを掲載したページが検索結果上位に表示されにくくなるように改良した。この新しい検出技術は、キーワードの繰り返しや自動生成コンテンツ、ブログコメントスパムなど、ウェブページ上で展開されるスパムの検出能力が向上している。また、2010年に流行った不正改ざんサイトやコピペ（重複）コンテンツ、ほとんどオリジナルティがないページといったスパムコンテンツなどの対策も大幅に改善されたと説明する。
Googleが今回、ウェブスパムを撲滅するために継続的な努力を実施していることを表明した背景には、最近、米国でGoogleの検索結果品質が低下していること、同社が十分なスパム対策を実施していないのではないかといった指摘に応えたものと思われる。Matt Cutts氏は改めて、「Googleは、広告主であるかどうかにかかわらず、品質ガイドラインに違反したサイトに断固とした措置を講じること」「Google広告の掲載は自然検索順位に何も影響しないこと」「Google広告の利用も同じく自然検索順位に何の影響もしないこと」を明言した。
As we’ve increased both our size and freshness in recent months, we’ve naturally indexed a lot of good content and some spam as well. To respond to that challenge, we recently launched a redesigned document-level classifier that makes it harder for spammy on-page content to rank highly. The new classifier is better at detecting spam on individual web pages, e.g., repeated spammy words—the sort of phrases you tend to see in junky, automated, self-promoting blog comments. [Google search and search engine spam, Google Blog]
#
ちょっと解説すると、CMSやAPI、RSSといった新しい技術の登場により、他人のサイトに掲載されているコンテンツをそのまま拝借してコピペサイトを構築したり、あるいは複数のサイトから適当に引っ張りだしたコンテンツを組み合わせて、あたかもオリジナルかのような（実際にはただのコピペ）サイトを作りだすことが簡単になってきました。たとえば、某飲食店サイトや某不動産情報サイトをAPIでひっぱってきてそのまま掲載しているコンテンツを山のように作っている（作っていた、過去）SEO会社というのは少なくありませんね。
また、確かに検索キーワードに合致するページは用意されているけれども、中身が空っぽ（たとえば、「この商品にはまだレビューが掲載されていません」「価格情報は登録されていません」「このキーワードについての説明はありません」といったメッセージを表示するページ）のページが自動的に生成されるような仕組みを持つECサイトやアグリゲーションサイトも増えました。
こうしたサイトは10年前のウェブにはあまり存在しませんでした。だからGoogleもあらたにこうした「コンテンツスパム」を上手に検出して、検索結果の上位に表示されにくいようなランキングアルゴリズムを開発する必要があったわけで、これがようやく（Google的には）成果を出し始めているんですよというのが今回のメッセージ。
