web
ヘッドレスブラウザPhantomJSでネットサーフィンする 環境 Linux Mint 17.1 Rebecca 64-bit MATE PhantomJSのインストール 事前準備 http://phantomjs.org/build.htmlを参考にして、下記パッケージをapt-getインストール 以前ruby2.2をインストールしたので…
自分のWebサイトを検索結果に載らないようにするため、 Webサーバのルートにrobots.txtを作成し、 インデキシングされないようにする "robots.txt"という名前のファイルを作成 robots.txtの中身にインデキシングを拒否する内容を以下のように記述 すべてのペ…