Node.js

paizaでスキルチェック(node.js編) システム開発

paizaでスキルチェック(node.js編)

目次 paizaとは?スキルチェック前の準備Dランクで肩慣らし paizaとは? paizaはシステムエンジニア向けの転職サービスとコーディング学習サービスを提供しているサイトです。コーディングで解くクイズ(スキルチェック)が面白くて、以前こちらのサイトを利用していました。その時はJavaでやってた…
Node.js用WEBスクレイピングモジュール システム開発

Node.js用WEBスクレイピングモジュール

cheerio-httpcli スクレイピングツールを作ってる所ですが、HTTPクライアントとして現在使用しているモジュールがこれ。 使い方はネットで検索すれば色々出てくるのですが、たまたまインストールディレクトリ見てたらREADMEファイルがすごくしっかり書かれてたのでびっくり。(当たり前?)そし…
スクレイピングツール開発(2) システム開発

スクレイピングツール開発(2)

ツール雛形 まずはツールの雛形になるものをNode.jsで少し書いてみようと先月作りました。これは某サイトの管理情報をID指定で指定秒数間隔で取得・スクレイピングして、ローカルのMongoDBに保存するものです。Node.jsはわりと最近書き出したのですが、未だにコールバックやPromiseの書き方…
スクレイピングツール開発 システム開発

スクレイピングツール開発

今日やった事をもっと気軽に書き溜めて行こう。書き方を悩んで書かずにいるよりとりあえず書いてみよう。 と、いう事で。現在、作ろうとしてるスクレイピングツールの設計資料。とりあえず機能一覧と目標設定を記載してみました。何だか良く分かんないかもしれません。と、いうか自分でも整理できてないので追々整理してい…