無断ブランド使用の販売元収集ツール

背景

財団が制作する文化商品にはブランドがあります。そのブランド名を正式な許諾なく付けて 販売する商品が、オンラインショッピングモールに出品されています。著作権と商標の保護は、 それがどこで販売されているかを把握することから始まります。

現場の状況

ショッピングモールの検索結果はページごとに分かれており、同じ販売元が別の商品として何度も表示されます。 目視で確認していくと、後ろのページほど見落としが増え、すでに確認した販売元をもう一度 確認することにもなります。検索結果のページ数によって、確認の精度が左右されていました。

課題

探すべきは商品ではなく販売元でした。商品単位で数えると同じ販売元が何度も カウントされ、実際に対応すべき相手が何件なのか分かりません。集計の単位を変えることが、 この案件の要でした。

開発内容

• 検索結果の全ページを巡回 — ブランド名で検索し、1ページ40件ずつ最後のページまで進みます
• 商品名の照合 — 商品名にブランド名が実際に含まれているものだけを残します
• 販売元単位で重複を排除 — 同じ販売元は1回だけ記録します。対応すべき件数が そのまま販売元の数になります
• Excel出力 — 商品名、販売元のURL、検索結果内の位置をあわせて記録し、後から たどれるようにしました

リスク対策

• 間隔を空けてページを送ります — ページを送るたびに、待ち時間をランダムに入れます。 短時間に集中してアクセスしないことで、最後のページまで途切れずに収集できます
• 最後のページまで確認します — 正規の販売元ではない出品は、検索結果の前半ではなく 後半に集中しています。最初の数ページだけでは、探すべきものが見つかりません
• 重複は販売元単位で除外します — 1つの販売元が商品を10点出品していても、記録は1回です。 対応すべき件数が水増しされません

結果

発注範囲の作業を完了し、納品しました。

同じ方式のほかの事例はWebデータ収集でご覧いただけます。