Webデータ収集の
作業コストはゼロの時代
Webクローラー&スクレイピングツール
Crawl Krei(クロールクレイ)
Webクローラー/Webスクレイピング
『Crawl Krei(クロール クレイ)』
03-3590-4110(代表)
電話でのお問い合わせ 平日9:00~18:00
Webデータ収集の
作業コストはゼロの時代
Webクローラー&スクレイピングツール
Crawl Krei(クロールクレイ)
『Crawl Krei(クロール クレイ)』は
Webクローラー&スクレイピングツールです
インターネット上で公開されているWebサイトに掲載されている情報を、自動的に収集・加工(クローリング&スクレイピング)し、そのデータをお客様へ提供するサービスです。お客様が求めているデータを、自動で、安全に、手早く収集し、必要としている使いやすい状態に加工をしてお手元にお届けします。
Crawl Kreiが選ばれる理由
低価格・短納期
スポットプランなら2万円から。
条件次第では契約から最短1営業日でのスピード提供が可能です。
機能性と柔軟性
サイトの種類・情報種別・日時・間隔・キーワードなど、お客様の多様なニーズにお応えします。
複雑な条件に対してはカスタマイズ対応も対応も承ります。
設定サポート
時間のかかりがちな設定作業はCrawl Kreiのサポートチームが全面サポートします。
お客様は対象サイトのURLや取得したい情報、収集条件をお伝えいただくだけです。
安心・安全
Crawl Kreiは法的対策が施された安心・安全なWebクローラーです。
クローリングのリスクとなる、不法行為責任や偽計業務妨害罪への対策を施してます。
Crawl Krei のコアとなる機能です。
データを収集(クローリング)し、抽出(スクレイピング)、そしてお客様のお手元に届くまでに必要な機能を実装しています。 収集できる対象(Webサイト/Webページ内の画像やPDFも可能)が豊富で、かつ期間や時間などの条件設定を行うことで、必要な情報を正しく抽出します。 また、抽出されたデータをお客様が使いやすいよう、
CSVやJSON形式などでも出力することができます。
データ抽出の期間・時間指定
「〇月〇日13時」といったような特定の日時であったり、「毎週金曜日14時」のような周期であったり、柔軟にWebクローリングのスケジュール指定が可能です。
レジューム機能
収集開始後にアクセス障害等でデータ収集ができなくなった場合、収集した時点から再度クローリングを行います。
IPアドレスローテーション
Webサイトにより、特定のIPアドレスからのクローリングを一定条件で拒否するような仕組みを導入している場合があります。このようなケースでは、拒否されたIPアドレスとは異なるIPアドレスでアクセスし、収集を可能にします。
抽出条件設定
企業情報、商品情報、口コミなど、クローリング対象のWebサイトに合わせたデータ収集方法を適用する機能です。お客様の要望に合わせて設定可能です。
リカーシブクローリング機能
収集対象のWebサイトに加えて、そのサイト内に存在するリンクを自動的に辿り、その先にある情報も自動的にクローリングする機能です。
Googleなど検索エンジンの検索結果を対象として収集することも可能です。
多数のデータ出力形式
Webクローラーで収集したデータは管理画面上で確認できるほか、お客様の要望に合わせて各種データ形式(csv,json,txt)で出力します。
JavaScriptレンダリング
JavaScriptによるレンダリング後に表示されるWebサイトの情報を取得するための機能です。
柔軟な検索条件設定
検索で目的の情報のみを抽出 Webサイト/Webページから収集した膨大なデータから、特定のキーワードに該当する箇所を抽出します。お客様が目的とする情報のみをスクレイピングするので、すぐにデータを利用することができます。
Crawl Kreiでクローリング・スクレイピングしたデータをすぐに活用できるよう、お客様の用途にあわせた環境提供を行っています。
小売店の課題
導入後の効果
指定したWebサイトより、製品の名称・価格・評価などの主要な情報を定期的にクローリング(収集)する仕組みをCrawl Kreiで提供しました。 Crawl Krei で収集したデータは管理画面上で確認できるほか、既存の分析ツールで活用できるCSV形式でダウンロードします。 大きな手間をかけることなく、競合他社の価格の推移や製品の評価など、マーケティングに無くてはならない分析に活用されています。
ファッションサイト運営会社様の課題
導入後の効果
さまざまな分野のファッション情報サイトを自動かつ定期的にクローリングすることにより、「Webサイトを訪問」するという単純作業ゼロにしました。そして抽出条件を詳細に設定しスクレイピングすることで、「一つ一つニュースを確認し、必要なニュースを判断してから抽出する」という時間のかかる作業もゼロにしました。
不動産物関連企業様の課題
導入後の効果
某社広報担当者の課題
導入後の効果
Crawl Kreiでは「情報を何に使うのか」(目的)や「どのぐらいのWebページの情報収集が必要なのか」(取得ボリューム)に合わせて3つのプランを用意しています。
お手軽に試せる1回限りの「スポットプラン」を除き、取得ボリュームに応じた従量課金制を採用しています。詳しく知りたい方は、Crawl Krei までお問い合わせください。
スポットプラン
導入費用
¥20,000~
1回限りのお手軽プラン
ベーシックプラン
導入費用
¥20,000~
複数回または10,001ページ以上のクローリングに最適です。
エンタープライズプラン
導入費用
要相談
「既存サービスと連携させたい」「大量データを取得したい」などに応えます。
Crawl Krei はすぐに情報収集をはじめることができるWebクローラー/Webスクレイピングツールです。
お客様からよく頂く質問はこちらをご確認ください。また、連携させたいサービスがある、料金が実際どうなるか知りたいなど、疑問に思われたことはお気軽にお問い合わせください。より詳細な製品の情報は『製品資料』(ダウンロード)でもご覧いただけます。
公開されているWebサイトの情報収集において、法的な懸念点はありますか?
弊社のWebクローラーは法的対策がしっかり施されており、法務部とも連動し定期的に関連する法令をチェックしています。
詳しくは製品資料をご覧ください。
収集できないデータはありますか?
基本的にはどのような形式のデータも収集可能ですが、画像に埋め込まれたテキストや音声・動画ファイルの内容を収集することはできません。
例えば、動画のタイトルからYouTubeの動画URLを収集することは可能ですが、動画中の発言やテロップの内容は収集できません。
クローリングできないWebサイトはありますか?
同一IPアドレスからの連続的なアクセスを弾くなど、Webクローラーからのアクセスを制限するための措置を取っているWebサイトでは取得ができない場合があります。
海外のサイトは収集可能ですか?
可能です。ただし、同一IPアドレスからの連続的なアクセスを弾くなど、Webクローラーからのアクセスを制限するための措置を取っているWebサイトでは取得ができない場合があります。
クライアントマシン(パソコン)の環境指定はありますか?
クラウドでの提供となるため、クライアントマシンの制約は一切ありません。
Webクローリング&スクレイピングを実際に依頼すると、設定などの作業は発生しますか?
お客様側で面倒な設定作業を行う必要はありません。対象サイトのURLや取得したい情報、収集条件を弊社へお伝えいただけば、設定作業はサポートチームが対応いたします。
03-3590-4110
受付 : 平日9:00〜18:00(年末年始を除く)