ガイド、チュートリアル& インサイト
Shifterチームが提供するレジデンシャルプロキシ、ウェブスクレイピング、データ収集戦略、業界のベストプラクティスについて学ぶ。
楽天市場・Yahoo!ショッピング・Amazon.co.jpの価格調査で見落とされる「実質価格」
日本のECでは表示価格とポイント還元後の実質価格が一致しません。楽天市場、Yahoo!ショッピング、Amazon.co.jpの価格を正しく比較するための収集設計を解説します。
BANされずにセンチメント分析用にソーシャルプラットフォームをスクレイピングする方法
ブロックはデータを失わせるだけでなく、センチメントスコアの算出元となるサンプルに偏りを生じさせます。ソーシャルデータを持続可能な方法で収集し、その偏りを測定する方法について解説します。
ソーシャル、フォーラム、レビューサイト全体でブランドの言及を追跡する方法
言及の追跡は、センチメントの問題である前にカバレッジの問題である。クエリセットの構築方法、シンジケーションの重複排除、自分の地域外での言及の確認方法について解説する。
営業インテリジェンスを強化するインテントシグナルのスクレイピング
バイヤーインテントデータは、読み解くべきシグナルさえ分かればその大半が公開情報である。有用なシグナルとは何か、それらがどれほど速く減衰するのか、そして大規模に収集する方法とは。
データレジデンシーとプロキシの所在地は違う:企業が見落としがちなコンプライアンス上の区別
フランスのプロキシ出口は、データがどこで処理・保存されているかを証明するものではありません。企業がプロキシの所在地とデータレジデンシーをどう区別すべきかを解説します。
年齢確認はジオコンプライアンステストの問題になりつつある
年齢確認法は今や地域ごとの製品要件を生み出している。レジデンシャルプロキシが認可されたジオコンプライアンステストをどのように支援できるかを学ぶ。
ウェブには視点基準が必要だ:パブリックウェブデータセットがデータの観測地点を記録すべき理由
データプロベナンスには、ウェブデータがどこで観測されたかを記録する必要がある。監査可能なデータセットにとって、地理、ネットワーク、デバイス、セッションのコンテキストがなぜ重要なのかを解説する。
クラウドベースのWebスクレイピングインフラでのISPプロキシの利用
あなたのスクレイパーはクラウド上で動作していますが、クラウドこそサイトが最初にブロックする対象です。一時的なワーカーの前に固定ISPイグレス層を配置する方法を解説します。
ISPプロキシが検索エンジンのデータ収集精度を向上させる方法
検索データの精度は、視点を固定し続けられるかどうかがほぼすべてです。静的ISP IPが役立つ場面、逆効果になる場面、そして収集層を分割する方法について。