どうしてエラーになるの？ chromeブラウザのバージョンには注意 seleniumを使っていると、ある日突然エラーが出てスクレイピングができなくなることに遭遇します。初めてこのエラーに遭遇するとエラーメッセージを見ても解決がなかなかできないことがあるかと思います。エラー遭遇時の解決方法を下記に記載いたします。困ったと...

どうやって自動で値を取得するのか？ スクレイピングの実践方法について 前回スクレイピングの導入方法（設定方法）について簡単な説明をさせていただきました。今回はWEBサイト上の値を実際に取得する方法について記載させていただきます。なお、サンプルはVBAを使っています。VBAのほうが手軽に試せて新規にツールなどをインストー...

それって自動化できるって知ってますか？ 意外と使えるけど、使われていないスクレイピングについて スクレイピングという言葉は知ってますか。スクレイピングは、プログラムを利用してウェブページのHTML構造を解析し、特定の情報（例：商品価格、記事のタイトル、画像など）をプログラムで自動的に取得することを指します。最近人気のP...

WEBサイトを運営していると何やら怪しいアクセスが！！ 簡単そうで簡単ではない海外からのアクセスの見分け方 WEBサイトを運営していると、WEBサーバのアクセスログを見ると海外から怪しいアクセスが多数あることに気づきます。さらに、ショッピングサイトを運営していると、架空の住所宛に買い物されたり、クレジットカードを不正利...

メールリレーサービスをご存じ？高いよね メールリレーサービスを使わず安くメールを送るには 会員制などのWEBサイトを提供している企業にとってサイトが大きくなると困ることの１つに多くの会員にメールを送るのには費用が思った以上に高いということです。 会員にメールを送るのは、会員数が少ない間はSMTPを利用して自社メールサー...

毎回メーカーサイトからダウンロードするのは大変すぎる！ もっと簡単にドライバーを入れれるとPCの移動も簡単 windowsを新規でセットアップするとき、困るものの１つにドライバーがあります。 あれ？セットアップしたけどネットにつながらない、ディスプレイの解像度がおかしいといったことはよくあること。とくに一昔前はネット上...

defer属性を付けると効果的な場合があります。 ページ読み込みに時間がかかる、読み込み後に実行したい場合に有効 defer属性を付けると、非同期でJavaScriptが読み込みされるようになります。つまり、JavaScriptはHTMLのパースと並行して非同期に読み込まれます。JavaScriptファイルのダウンロー...

ユーザーエージェントでユーザーを判別していたけどできなくなった。どうするの？ ユーザーエージェントは基本的に使えなくなってしまいました。 プライバシー保護の強化、ユーザーエージェント偽装などの影響で、Google Chromeなどをはじめとしたブラウザでユーザーエージェントの利用ができなくなってしまいました。ユーザーエ...

phpからmultipartでデータをアップロードするにはどうするの？ multipartを使うとPOSTデータ以外にCSVファイル、zipファイルなどをアップロードできます。 PHPを使った方法を記載します。multipart/form-dataを利用してPOSTデータを送るには、cURLライブラリを使用するのが一般...

ブラウザからサーバ上のEXEを実行するにはどうするの？ ブラウザからサーバ上のEXEを実行するのは意外と難しい！ WEBサイトをプログラムしていると、Perlでは簡単にできることが今使っているプログラム言語だとできない、または複雑なコーディングが必要といったことがたまにでてきます。 IIS環境でASPを利用している場合...