お知らせ 21 3月 2019 ツール開発のご案内 Webページ情報抽出・スクレイピングツール開発について 「Webページから一括で情報抽出したい。抽出データを日々の業務に役立てたい。」よくあるご要望です。先月から作っていたツールが一先ず出来上がったのでお知らせします。興味があれば下記のページからお問い合わせ可能です。皆様のお役に立てればと思います。… 続きを読む
システム開発 17 3月 2019 paizaでスキルチェック（node.js編） 目次 paizaとは？スキルチェック前の準備Dランクで肩慣らし paizaとは？ paizaはシステムエンジニア向けの転職サービスとコーディング学習サービスを提供しているサイトです。コーディングで解くクイズ（スキルチェック）が面白くて、以前こちらのサイトを利用していました。その時はJavaでやってた… 続きを読む
システム開発 5 3月 2019 Node.js用WEBスクレイピングモジュール cheerio-httpcli スクレイピングツールを作ってる所ですが、HTTPクライアントとして現在使用しているモジュールがこれ。 使い方はネットで検索すれば色々出てくるのですが、たまたまインストールディレクトリ見てたらREADMEファイルがすごくしっかり書かれてたのでびっくり。（当たり前？）そし… 続きを読む
システム開発 2 3月 2019 スクレイピングツール開発（2） ツール雛形 まずはツールの雛形になるものをNode.jsで少し書いてみようと先月作りました。これは某サイトの管理情報をID指定で指定秒数間隔で取得・スクレイピングして、ローカルのMongoDBに保存するものです。Node.jsはわりと最近書き出したのですが、未だにコールバックやPromiseの書き方… 続きを読む
システム開発 27 2月 2019 スクレイピングツール開発 今日やった事をもっと気軽に書き溜めて行こう。書き方を悩んで書かずにいるよりとりあえず書いてみよう。 と、いう事で。現在、作ろうとしてるスクレイピングツールの設計資料。とりあえず機能一覧と目標設定を記載してみました。何だか良く分かんないかもしれません。と、いうか自分でも整理できてないので追々整理してい… 続きを読む
