Rubyを使ったスクレイピングワークショップ0303

2018/03/03(土)14:00 〜 18:00 開催
ブックマーク
Ruby, ワークショップ

イベント内容

対象

プログラミング初心者も可です。 スクレイピングしたいサイトがあれば、その場でレクチャーをします。 2/3の「Rubyを使ったスクレイピングワークショップ」のプログラムと同様です。

必要となるもの

RubyがインストールされたノートPC （WindowsでもMacでもLinuxでも可） バージョンは特には問いませんが、2.3以降が無難かと思います。

内容

  • 開発環境構築
  • open-uriを使ったHTTP取得
  • Nokogiriを使ったパース
  • ChromeDeveloperツールの使い方
  • HTTPヘッダに関して
  • AJAX通信内容をみてJSONをパース
  • ログインクッキーを使ったスクレイピング
  • curlコマンド単体での実験方法
  • curlコマンドをrubyソースに変換する方法
  • ページングをたどった全件取得
  • （上級編）puppeteer を使ったheadless chromeの操作
  • （上級編）Charles を使った、スマホネイティブアプリのスクレイピング

一つのクローラーを完成させるところまでやりきります。

場所

代々木村田マンション 711

〒151-0053 東京都渋谷区代々木４丁目２８−８

注意事項

※ こちらのイベント情報は、外部サイトから取得した情報を掲載しています。
※ 掲載タイミングや更新頻度によっては、情報提供元ページの内容と差異が発生しますので予めご了承ください。
※ 最新情報の確認や参加申込手続き、イベントに関するお問い合わせ等は情報提供元ページにてお願いします。
情報提供元ページ（connpass）へ

新規会員登録

このイベントに申し込むには会員登録が必要です。
アカウント登録済みの方はログインしてください。

※ ソーシャルアカウントで登録するとログインが簡単に行えます。

※ 連携したソーシャルアカウントは、会員登録完了後にいつでも変更できます。

関連するイベント