Webクローラー/Webスクレイピング
『Crawl Krei(クロール クレイ)』

03-3590-4110(代表)

電話でのお問い合わせ 平日9:00~18:00

Webデータ収集の
作業コストはゼロの時代

Webクローラー&スクレイピングツール 
Crawl Krei(クロールクレイ)

Crawl Kreiとは

『Crawl Krei(クロール クレイ)』は
Webクローラー&スクレイピングツールです

インターネット上で公開されているWebサイトに掲載されている情報を、自動的に収集・加工(クローリング&スクレイピング)し、そのデータをお客様へ提供するサービスです。お客様が求めているデータを、自動で、安全に、手早く収集し、必要としている使いやすい状態に加工をしてお手元にお届けします。

Crawl Kreiが選ばれる理由

  • 低価格・短納期

    スポットプランなら2万円から。
    条件次第では契約から最短1営業日でのスピード提供が可能です。

  • 機能性と柔軟性

    サイトの種類・情報種別・日時・間隔・キーワードなど、お客様の多様なニーズにお応えします。
    複雑な条件に対してはカスタマイズ対応も対応も承ります。

  • 設定サポート

    時間のかかりがちな設定作業はCrawl Kreiのサポートチームが全面サポートします。
    お客様は対象サイトのURLや取得したい情報、収集条件をお伝えいただくだけです。

  • 安心・安全

    Crawl Kreiは法的対策が施された安心・安全なWebクローラーです。
    クローリングのリスクとなる、不法行為責任や偽計業務妨害罪への対策を施してます。

主な機能

Crawl Krei のコアとなる機能です。
データを収集(クローリング)し、抽出(スクレイピング)、そしてお客様のお手元に届くまでに必要な機能を実装しています。 収集できる対象(Webサイト/Webページ内の画像やPDFも可能)が豊富で、かつ期間や時間などの条件設定を行うことで、必要な情報を正しく抽出します。 また、抽出されたデータをお客様が使いやすいよう、 CSVやJSON形式などでも出力することができます。

  • データ抽出の期間・時間指定

    「〇月〇日13時」といったような特定の日時であったり、「毎週金曜日14時」のような周期であったり、柔軟にWebクローリングのスケジュール指定が可能です。

  • レジューム機能

    収集開始後にアクセス障害等でデータ収集ができなくなった場合、収集した時点から再度クローリングを行います。

  • IPアドレスローテーション

    Webサイトにより、特定のIPアドレスからのクローリングを一定条件で拒否するような仕組みを導入している場合があります。このようなケースでは、拒否されたIPアドレスとは異なるIPアドレスでアクセスし、収集を可能にします。

  • 抽出条件設定

    企業情報、商品情報、口コミなど、クローリング対象のWebサイトに合わせたデータ収集方法を適用する機能です。お客様の要望に合わせて設定可能です。

  • リカーシブクローリング機能

    収集対象のWebサイトに加えて、そのサイト内に存在するリンクを自動的に辿り、その先にある情報も自動的にクローリングする機能です。
    Googleなど検索エンジンの検索結果を対象として収集することも可能です。

  • 多数のデータ出力形式

    Webクローラーで収集したデータは管理画面上で確認できるほか、お客様の要望に合わせて各種データ形式(csv,json,txt)で出力します。

  • JavaScriptレンダリング

    JavaScriptによるレンダリング後に表示されるWebサイトの情報を取得するための機能です。

  • 柔軟な検索条件設定

    検索で目的の情報のみを抽出 Webサイト/Webページから収集した膨大なデータから、特定のキーワードに該当する箇所を抽出します。お客様が目的とする情報のみをスクレイピングするので、すぐにデータを利用することができます。

導入事例

Crawl Kreiでクローリング・スクレイピングしたデータをすぐに活用できるよう、お客様の用途にあわせた環境提供を行っています。

価格調査

小売店の課題

競合他社のECサイトに掲載されている、個々の製品情報をマンパワーで収集している。
競合のECサイトは数も多く、また商品数も膨大にあるため価格調査をするだけでもかなりの工数を要している。
単純作業だけに、もっと効率よく、かつ間違いなくできないものか。

導入後の効果

  • マンパワーに依存していた、競合他社のECサイト掲載価格調査の工数を大幅に削減できた
  • Crawl Krei でクローリング&スクレイピングしたデータを、既存で利用していた分析プラットフォームで連携することが可能になった

指定したWebサイトより、製品の名称・価格・評価などの主要な情報を定期的にクローリング(収集)する仕組みをCrawl Kreiで提供しました。 Crawl Krei で収集したデータは管理画面上で確認できるほか、既存の分析ツールで活用できるCSV形式でダウンロードします。 大きな手間をかけることなく、競合他社の価格の推移や製品の評価など、マーケティングに無くてはならない分析に活用されています。

ニュース収集

ファッションサイト運営会社様の課題

ファッションサイトの会員はトレンドに敏感なユーザーが多い。こまめにサイトに足を運んでもらうため、魅力的な情報を掲載したい。

導入後の効果

  • コンテンツ作成のための情報収集にかけていた時間が大きく削減でき、魅力的なコンテンツを作るためのそれ以外の作業に時間を使うことができるようになった
  • 会員のニーズやトレンドにあった新しいニュースを素早く提供でき、会員向けサイトへの訪問数や滞在率を伸ばすことができた

さまざまな分野のファッション情報サイトを自動かつ定期的にクローリングすることにより、「Webサイトを訪問」するという単純作業ゼロにしました。そして抽出条件を詳細に設定しスクレイピングすることで、「一つ一つニュースを確認し、必要なニュースを判断してから抽出する」という時間のかかる作業もゼロにしました。

市場調査

不動産物関連企業様の課題

相場や人気地域の状況を把握したい。不動産情報サイトが多く収集が大変。

導入後の効果

  • マンパワーに依存していた競合他社のWebサイトの調査工数が大幅に削減
  • 収集データを元にお客様の分析プラットフォームでの連携が可能になった

反響調査

某社広報担当者の課題

広報・マーケティング部門が配信したプレスリリースがどのメディアに転載されているか、 また記事化されているかを人力で確認していた為、継続的に調査の工数が発生。情報の抜け漏れもあった。

導入後の効果

  • クローリングするWebサイトを指定することなく収集

プラン

Crawl Kreiでは「情報を何に使うのか」(目的)や「どのぐらいのWebページの情報収集が必要なのか」(取得ボリューム)に合わせて3つのプランを用意しています。
お手軽に試せる1回限りの「スポットプラン」を除き、取得ボリュームに応じた従量課金制を採用しています。詳しく知りたい方は、Crawl Krei までお問い合わせください。

  • スポットプラン

    導入費用

    20,000

    1回限りのお手軽プラン

    ページ数上限/月 10,000
    ページ単価 なし
    データ収集回数/月 1回
    詳細な費用はお問い合わせください
  • ベーシックプラン

    導入費用

    20,000

    複数回または10,001ページ以上のクローリングに最適です。

    ページ数上限/月 500,000
    ページ単価 \1~3
    データ収集回数/月 制限なし
    詳細な費用はお問い合わせください
  • エンタープライズプラン

    導入費用

    要相談

    「既存サービスと連携させたい」「大量データを取得したい」などに応えます。

    ページ数上限/月 上限なし
    ページ単価 制限なし
    データ収集回数/月 制限なし
    詳細な費用はお問い合わせください

よくある質問

Crawl Krei はすぐに情報収集をはじめることができるWebクローラー/Webスクレイピングツールです。
お客様からよく頂く質問はこちらをご確認ください。また、連携させたいサービスがある、料金が実際どうなるか知りたいなど、疑問に思われたことはお気軽にお問い合わせください。より詳細な製品の情報は『製品資料』(ダウンロード)でもご覧いただけます。

  • 公開されているWebサイトの情報収集において、法的な懸念点はありますか?

    弊社のWebクローラーは法的対策がしっかり施されており、法務部とも連動し定期的に関連する法令をチェックしています。
    詳しくは製品資料をご覧ください。

  • 収集できないデータはありますか?

    基本的にはどのような形式のデータも収集可能ですが、画像に埋め込まれたテキストや音声・動画ファイルの内容を収集することはできません。
    例えば、動画のタイトルからYouTubeの動画URLを収集することは可能ですが、動画中の発言やテロップの内容は収集できません。

  • クローリングできないWebサイトはありますか?

    同一IPアドレスからの連続的なアクセスを弾くなど、Webクローラーからのアクセスを制限するための措置を取っているWebサイトでは取得ができない場合があります。

  • 海外のサイトは収集可能ですか?

    可能です。ただし、同一IPアドレスからの連続的なアクセスを弾くなど、Webクローラーからのアクセスを制限するための措置を取っているWebサイトでは取得ができない場合があります。

  • クライアントマシン(パソコン)の環境指定はありますか?

    クラウドでの提供となるため、クライアントマシンの制約は一切ありません。

  • Webクローリング&スクレイピングを実際に依頼すると、設定などの作業は発生しますか?

    お客様側で面倒な設定作業を行う必要はありません。対象サイトのURLや取得したい情報、収集条件を弊社へお伝えいただけば、設定作業はサポートチームが対応いたします。

Webクローラー/Webスクレイピング Crawl Krei(クロール クレイ)について詳しく知りたい方は

03-3590-4110

受付 : 平日9:00〜18:00(年末年始を除く)