今から五分間時間を取りますので、それぞれのペアで意見を出し合ってみましょうなどと促す。
きっけけがあれば人は発言するものである。
- 作者: 宇井克己
- 出版社/メーカー: 北辰堂出版
- 発売日: 2010/11
- メディア: 単行本
- クリック: 12回
- この商品を含むブログを見る
今から五分間時間を取りますので、それぞれのペアで意見を出し合ってみましょうなどと促す。
きっけけがあれば人は発言するものである。
robots.txtやrobots metaタグは、拘束力のない紳士協定です。これらの指示に従うかどうかは、クローラ作成者が決められます。
相手のWebサイトに迷惑をかけないようにするため、クローラーを作成する際には、これらの指示に従うべきである。
なお、上記背景より、セキュリティ的にも悪意を持った人からはクローリングされる事は認識しておかなければならない。
Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-
1つのコンテンツに田老牛、時間が経っても対応するコンテンツが変わらないURLをパーマリンク[Permalink]と呼びます。不変のという意味とリンクを組み合わせた言葉です。
パーマリンクを持つWebサイトは、Googleなどの検索エンジンのクローラーがコンテンツを認識しやすく、SELに強くなります。また、FacebookやTwitterなどのSNSに投稿しやすいという特徴もあるため、多くのWebサイトがパーマリンクを持つ背景となっている。
Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-
URLの部分 | 説明 |
---|---|
スキーム | httpやhttpsのようにプロトコルを表す。 |
オーソリティ | //のあとに続き、通常ホスト名を表す。ユーザー名やパスワード、ポート番号を含む場合もある。 |
パス | /で始まり、そのホストにおけるリソースのパスを表す。 |
クエリ | ?のあとに続き、パスとは異なる方法でリソースを指定するために使われる。存在しない場合もある。 |
フラグメント | #の後に続き、リソース内の特定の部分などを表す。存在しない場合もある。 |
Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド-
[事象]
dbcaコマンドでレスポンスファイルを用いてインスタンス作成を行おうとしたが、エラーが発生してインスタンスが作成できなかった。
(実行したコマンド)
dbca -silent -responseFile /home/oracle/work/dbca_testdb.rsp
(エラーメッセージ)
[INS-04008] コマンドラインから渡された引数の組み合わせが無効です。1つ以上の必須の依存引数が引数:-silentに対して渡されていません
[原因]
自身では解決できなかった。
Oracle12cのインストールガイド A.5.3 レスポンス・ファイル・モードでのDatabase Configuration Assistantの実行を参考に色々試してみたが駄目であった。開発者版では対応していないということであろうか…。
レスポンス・ファイルを使用したOracle Databaseのインストールおよび構成
[対応方法]
GUIが使えなく、どうしてもサイレントモードでインストール必要があった。
しかし、レスポンスファイルを使う必要性は無かったので、パラメータから指定する事でインスタンスを作成する事ができた。
dbca -silent -createDatabase -templateName /u01/app/oracle/product/12.1.0/dbhome_1/assistants/dbca/templates/General_Purporse.dbc -sid oradb -responseFile NO_VALUE -characteSet AL32UTF8 -memoryPercentage 30 -emConfiguration LOCAL
[参考サイト]
DBCAのサイレントモードでOracleの作成手順 - 技術メモ
新・門外不出のOracle現場ワザ ?エキスパートが明かす運用・管理の極意
実体は、便利なビューやストアドプログラムの集合体である。
MySQL本体とは異なるプロジェクトとして開発されたツールという経緯上、MySQL5.6でも利用可能である。MySQL Workbenchからインストールする方がお手軽であるが、GitHubからソースコードを入手してインストールも可能である。但し、5.6では5.7に比べて使える機能が若干少なくなっている。
詳解MySQL 5.7 止まらぬ進化に乗り遅れないためのテクニカルガイド