Web Scraping

Message

単純作業・繰り返し処理の自動化で有効な時間を提供します

デスクトップアプリ化と
運用代行対応

Price

静的サイト
スクレイピングツール
静的サイトスクレイピング

一般的なサイトのスクレイピングです。
複雑なページ構成をしていないので制作・納品を比較的早く行えます。

自動化できる操作の例:
検索・クリック・画像取得・文章取得など

  • ¥10,000(税込)~
  • 短期・長期利用対応
  • 運用代行対応
  • 修正・アップデート対応
  • パスワード・IP制限対応
Ajax(非同期通信)サイト
スクレイピングツール
Ajax(非同期通信)サイトスクレイピング

SNSなど、スクロールに応じて内容が追加・更新されるサイトが対象です。
アクセス制限など回避する都合上、検索などの作業は時間がかかります。

自動化できる操作の例:
検索・クリック・画像取得・文章取得・投稿・フォロー・DMなど

  • ¥100,000(税込)~
  • 長期利用対応
  • 運用代行対応
  • 修正・アップデート対応
  • パスワード・IP制限対応
ECサイト
スクレイピングツール
ECサイトスクレイピング

ECサイトが対象のスクレイピングツールです。

自動化できる操作の例:
検索・クリック・画像取得・文章取得・出品・購入など

  • ¥10,000(税込)~
  • 準備中
  • 準備中
  • 準備中
  • 準備中
静的サイトスクレイピングツール

一般的なサイトのスクレイピング。

¥10,000(税込)~

詳しくはこちら

Ajax(非同期通信)サイト
スクレイピングツール

SNSなど、スクロールに応じて内容が追加・更新されるサイトを対象としたスクレイピングツール。

¥100,000(税込)~

詳しくはこちら

ECサイトスクレイピングツール

ECサイト専門のスクレイピングツール。現在準備中です。

¥XX,XXX(税込)~

詳しくはこちら

Twitter
アカウント検索
Twitterスクレイピング

キーワード・NGワード・フォロワー数などの条件に該当するアカウントをピックアップします。
複数運用も対応可能です。

  • ¥1/件数
  • 長期利用対応
  • 初期費用: ¥5,000/運用数
  • 定期実行対応
  • データ形式相談可
YouTube
チャンネル情報取得
YouTubeスクレイピング

YouTubeチャンネルページから、チャンネルアイコン・登録者数・投稿動画・サムネイル・タイトル・公開日時・再生数を取得します。
継続的にデータを取得することで、一定期間の登録者増加数・期間再生数のデータを作成することも可能です。

  • ¥20/チャンネル
  • 短期・長期利用対応
  • 初期費用: ¥5,000/運用数
  • 定期実行対応
  • データ形式相談可
GoogleMap
店舗情報取得
googleMapスクレイピング

都道府県・市区町村・業種のキーワードでGoogleMapから店舗情報を取得します。

  • ¥1/件数
  • 短期利用対応
  • 初期費用: ¥0
  • 定期実行非対応
  • データ形式相談可
Twitterアカウント検索

条件に該当するアカウントをピックアップ。

¥1/件数

詳しくはこちら

YouTubeチャンネル情報取得

任意のデータを取得することでまとめサイトの作成が可能に。

¥20/チャンネル

詳しくはこちら

GoogleMap店舗情報取得

GoogleMapから指定した条件に当てはまるお店情報をピックアップ。

¥1/件数

詳しくはこちら

Appeal

APIを使用しない
「人間の操作」を忠実に再現

一般的にスクレイピングというと高速でサイトの情報を取得するようなイメージですが、
短期間での多量アクセスはサイトを運営しているサーバへ負担をかけることになり、サーバが落ちてしまう原因になり得ます。
こういったことはDDos攻撃として見なされてしまう可能性があります。

そこで、私のツールは
私たちが普段ブラウザでサイトを見たり操作する一連の動作をそのまま再現するというコンセプトで制作します。
それによってサーバへの負荷を過度にかけない設計で、アクセス拒否などの問題もクリアします。

APIを使用しないメリット

・基本的にどのサイトでも対応可能
・短時間での多数アクセスを防止し、アクセス制限やアカウントの凍結を回避
・想定する操作に対し柔軟な対応が可能
・APIの使用回数制限などがないため無制限で使用できる
・APIを使用する準備がいらない
・APIの仕様変更に影響されない

APIを使用しないデメリット

・サイトの解析が必要なため開発に時間がかかる
・APIを使用したツールに比べるとスピードが遅い
・サイトの仕様が変更されると動作しなくなる可能性がある
・サーバメンテナンス等でサイトが表示されない時は使用できない
・IPアドレスの制限に弱い
・画像認証などのロボット対策に対応できない


導入事例

*機密情報保持の関係でサイト名を伏せているものがあります

静的サイトスクレイピング

企業サイトの問合せページのリストアップ

コーポレートサイトからお問い合わせフォームがあるページをスクレイピングでリストアップ。

Ajax(非同期通信)サイトスクレイピング

SNS運用補助ツール

SNS運用のためのツール開発。
ツイートの管理、DMチェック送信など。

静的サイトスクレイピング

Instagramアカウント検索

スクレイピングにてプロフィール、ハッシュタグなどから条件に該当するアカウントのリスト作成。

Ajax(非同期通信)サイトスクレイピング

Twitterアカウント検索

スクレイピングにてツイート内容などからキーワード検索しアカウントをリスト化。
有効なアカウントのみを選別し、URLやフォロワー数を取得&テキスト出力。

googleMapスクレイピング

googleMap企業情報取得

スクレイピングにてgogleMapから指定のエリア、業種を条件に
企業情報を収集。

ECサイトスクレイピング

shopify自動更新ツール

スクレイピングにてshopifyで価格、在庫情報を自動で更新するツールを制作。

googleMapスクレイピング

googleMap企業情報取得

スクレイピングにてgogleMapから指定のエリア、業種を条件に
企業情報を収集。

静的サイトスクレイピング

静的サイトスクレイピング

スクレイピングにて指定された条件でサイト内検索し、該当するページの情報を取得。
条件ごとにリストを分割しCSVで出力。

GoogleMap店舗情報取得

スクレイピングにてGoogleMapから都道府県・市町村・業種のキーワードで店舗を検索し必要情報を取得。CSVで出力。
パスワード認証とマシンによる動作許可のシステムを導入。

YouTubeスクレイピング

YouTubeチャンネル情報取得

スクレイピングにて各チャンネルページから動画タイトル・動画時間・公開日時・サムネイル・再生回数などを取得。
条件による並び替えや比較データも同時に作成。JSONファイルで出力。

Ajax(非同期通信)サイトスクレイピング

Twitterアカウント検索

スクレイピングにてツイート内容などからキーワード検索しアカウントをリスト化。
有効なアカウントのみを選別し、URLやフォロワー数を取得&テキスト出力。

その他実績やご依頼はこちら