initscriptの記述 LSB記法とchkconfig

背景

kibana をインストールするときに、initscriptを自分で作成した。その時に疑問に思った initscriptの記法についてメモしておく。 https://github.com/akabdog/scripts/blob/master/kibana4_init ここらへんを参考に自分でPATHなど変更して使った。上の方にBEGIN INIT INFOで始まるブロックがあるが、それの意味を調べた。

参考

INIT INFO

LSB（Linux Standard Base）の記法。ディストリビューションによらない共有の記述みたい。chkconfigはRedhat系だけっぽい。

### BEGIN INIT INFO
# Provides:          kibana
# Required-Start:    $local_fs $remote_fs $network
# Should-Start:      $time
# Required-Stop:     $local_fs $remote_fs $network
# Default-Start:     3 5
# Default-Stop:      0 1 2 6
# Short-Description: Kibana 4
# Description:       Service controller for Kibana 4
### END INIT INFO
  • Required-Start: ここで指定されたserviceを起動した後でこのinitscriptのプロセスを起動する
  • Default-Start: 起動するrunlevel を指定する。ネットワーク経由でアクセスする前提のプロセスについては大体３（マルチユーザモード）と５（マルチユーザモード＋Xディスプレイマネージャ）。2はマルチユーザモードだけどネットワークを起動しない。

chkconfig と書いてあるinitscriptもあるけど？

elasticsearch はLSBの記法に加えて、内容が重複するものが書いてあった。

# chkconfig:   2345 80 20
# description: Starts and stops a single elasticsearch instance on this system
#

### BEGIN INIT INFO
# Provides: Elasticsearch
# Required-Start: $network $named
# Required-Stop: $network $named
# Default-Start: 2 3 4 5
# Default-Stop: 0 1 6
# Short-Description: This service manages the elasticsearch daemon
# Description: Elasticsearch is a very scalable, schema-free and high-performance search solution supporting multi-tenancy and near realtime search.
### END INIT INFO

chkconfigの記法では、priority が数値で指定できるが、LSBの記法だとRequired-startとかで前後関係しか指定できない。priorityの間に新しいのが入ると大規模な（数値の）シフトがおこるっぽい。 内容が重複しているので、LSBとchkconfigでどちらが優先されるのか調べたところchkconfigコマンドのmanによれば、LSBの記述が優先されるみたい。

読書メモ：達人に学ぶDB設計　徹底指南書

【参考】

達人に学ぶDB設計　徹底指南書 kindleで買って、一旦50％くらいまでさらっと読んだ状態。ざっくりER図がかけて、正規化が何かぼんやりわかるところまで。パフォーマンスチューニングについてはこれから。

【データベース設計】

やること

  • エンティティの抽出（ どういう機能を入れたいか、またそれに必要なデータの抽出）
  • エンティティの定義
  • 正規化
  • ER図の作成

エンティティはデータを属性（attribute）という形で保持する。テーブルにおける「列」と同義。 テーブル名は、すべて複数形または複数名詞でかける。原理的に同じ種類のものが複数入っているため。

【テーブルに対する制約】

  • NOTNULL制約：この行は絶対にNULLにならないというのがわかっていればNULL禁止にする。列単位の設定。可能な限り設定したい。
  • 一意制約：ある列の組について一意性を求める。主キーでは当然この制約があるが、ほかの列にも設定可能
  • CHECK制約：列の取りうる値の範囲の制限。数字や文字列をあらかじめ決めておく。

【正規化】

正規化とそれによってつくられる正規形。 第１～第５正規形がある。数値があがると正規化のレベルが上がる。 正規化をするほどデータ整合性は高まるが、検索性能が劣化する。実用レベルでは第３正規形までを考えれば十分。 それぞれの概要

  • 第１：一つのセルには一つの値だけ
  • 第２：テーブル内に部分関数従属があるものを、完全関数従属のみのテーブルを作る。
    • 関数従属性を満たす。X列の値を決めればY列の値が１つに決まる。「会社IDと会社名」、「社員IDと社員名」が同一テーブルにある場合にはそれぞれ部分関数従属。それぞれテーブルを分ければ完全関数従属。これをやるメリット：社員がいるかどうか変わらない会社を登録できない。MULLかダミーの値を突っ込むことになる。独立していれ会社テーブルにだけ登録できる。
  • 第３：２段階の関数従属（推移的関数従属）をなくす。すべてのテーブルについて非キー列がキー列に従属するようにする。

メリットデメリット

  • メリット: 更新のミスを防ぐ。テーブルの持つ意味が明確になる。
  • デメリット：テーブルの数が増えるとSQLで結合が必要になり、パフォーマンスが低下する。

１テーブルには一つのエンティティ情報を含める。正規化の逆操作は結合。

【ER図】

スタンダードなER記は主に二つ。

  • IE（Information Engineering）表記法（通称鳥の足）　
  • IDEFIX

テーブルの表現方法はどちらも同じ。テーブル名、上に主キー、下に非主キー属性のもの。FKにはその旨をかく。外部キー：Foreign key（FK）。主キー：Primary Key（PK）。 テーブル間の関係は、基本的に１：多。多：多の場合には１：多に分解する。 あるテーブルの主キーが他のテーブルに列として含まれているかどうかというのが重要。

IE表記

  • "ー" は相手のエンティティと対応するレコード数が１（カーディナリティが１）。
  • "○" はゼロ、鳥脚は複数。二つ組み合わせて、ゼロ以上の複数を表す。

IDEFIX表記

略

関連実体

多：多は関連実体で解決する。 学生：講義　とかは多：多になってしまう。二つのテーブルを紐つけようとすると無理やり学生テーブルに「講義コード」列をいれることになる。そうすると講義未登録の学生はNOTNULL制約によりレコード追加できなくなる。 それを防ぐために間に関連実体を挟む。受講エンティティを間に挟んで１：多の関係を二つにする。「学生」「講義」のそれぞれの主キーを組み合わせたキーを主キーとする。

【パフォーマンス劣化を防ぐ】

joinは重い処理。複数（特に３つ以上）を結合すると思い。むしろ非正規化してjoinを使わない方法も。 ただし、非正規化のテーブルに対してUPDATEをかけるとものすごくレコードが多かったりする。正規化されていればテーブル一つにちょっと更新をかければよいことが多い。 データ整合性とパフォーマンスはトレードオフ。原則的には正規化する。非正規化は最後の手段。劇薬。

VagrantのCent6.6 のBoxを使ったらsshできなかった

背景

新しいMacを買って、VirtualBoxとVagrantを使ってAnsibleの足場環境を作りたい。CentOSのVMを立てようとした。 http://www.vagrantbox.es/　ここから適当なBoxであるCentOS6.6をダウンロードしてきて使おうとしたがエラーが出てうまく vagrant up できないように見えた。

エラーメッセージ

default: Warning: Authentication failure. Retrying...

使おうとしたBox

https://github.com/tommy-muehle/puppet-vagrant-boxes/releases/download/1.0.0/centos-6.6-x86_64.box

問題と解決

vagrant boxはvagrantユーザのパスワードがvagrantになっているっぽいので、それでパスワードログインする。 VM内のauthorized_keysのパーミッションが間違っていて、0664みたいになっていた。これを0600に修正して問題なく vagrant ssh できるようになった。

Rubyのインストール（rbenvを使った方法）

これは何

rubyのインストールの手順をまとめている。

参考

LinuxにRuby on Railsをインストールする | tsuchikazu blog

rbenv を使って ruby をインストールする(CentOS編) - Qiita

手順

rbenvのインストール

まずRuby環境管理ツールのrbenvをインストールする。rbenvは多分ruby environmentの略。 そのためにgitをインストールする。gitはざっくりいうとコード管理ツール。

$ sudo yum install -y git
$ git --version
git version 1.7.1

現在のディレクトリにrbenvをダウンロード。ディレクトリはここでは隠しディレクトリ .rbenv　とする。

$ git clone git://github.com/sstephenson/rbenv.git ~/.rbenv

# PATH に追加
$ echo 'export PATH="$HOME/.rbenv/bin:$PATH"' >> ~/.bash_profile

# .bash_profile に追加
$ echo 'eval "$(rbenv init -)"' >> ~/.bash_profile

# 上記設定の再読み込み
$ exec $SHELL -l

# インストールの確認
$ rbenv --version

バージョンが表示されればOK。

rbenvのプラグインとしてruby-buildをインストールする。これを使わないとrubyの煩雑なインストールが手作業になるっぽい。ディレクトリは先ほどの.rbenvの下へ。

git clone git://github.com/sstephenson/ruby-build.git ~/.rbenv/plugins/ruby-build

rubyのインストール

# あらかじめ依存するライブラリopensslを入れておく
$ sudo yum install -y openssl-devel

# インストールできるrubyのリスト見る
$ rbenv install -l

# 今回は2.1.0をいれてみる
$ rbenv install 2.1.0

# 新しいものをインストールした後にはrehashコマンドを用いて適切なディレクトリに配置してもらう
$ rbenv rehash

rehashについてはこちらも参照のこと　 rbenv rehashは何をやっているのか？ - DQNEO起業日記

インストールには結構時間がかかるので気長に待つ。Ruby関係は概して長い。 トラブルが起こったらエラー出力で指定されているlogファイルを見て、何が足りないのか確認する。

# 今使用できるRubyの情報を見る
$ rbenv versions

# どれを使うか選択する
$ rbenv global 2.1.0

# 今使っているRubyに*がついているはず
$ rbenv versions

VagrantfileでPrivate IPアドレスをふる

これは何

Vagrantで仮想環境を作るときに、プライベートIPアドレスをふっておきたい時の簡単設定

方法

"Vagrantfile"ファイルの以下の行のコメントアウトを外し、適当なIPに書き換える。

  # config.vm.network "private_network", ip: "192.168.33.10"

他の仮想環境などとIPアドレスが重複するとどちらかに繋がらないなどの問題が起こるので、重複しないようにする。 すでに仮想環境が起動している場合には再起動を行い、設定を反映させる。

Vagrantで適当なboxファイルを使ってみる

Vagrantで適当なboxファイルを使ってみる

やった理由

前回の記事で導入できたOSはUbuntu系だった。
$ cat /etc/issue
Ubuntu 12.04 LTS

普段はRedhat系のScientific Linuxを使っているので、ちょっと使いにくいかも、と思って、今度はCentOSをboxファイルを指定して入れてみることにした。
ちなみにDebien系とRedHat系だとパッケージ管理にapt-getとyumがそれぞれ使われてたりしていろいろ使い勝手が違う。
そもそも上記のバージョンが格納されているファイルも違う。

リスト追加

今回はこちらのサイトから
http://www.vagrantbox.es/
アドレスを引っ張ってきて使う。
centOS6.5のboxを選ぶ。

とりあえず
$ vagrant box add centOS http://www.lyricalsoftware.com/downloads/centos65.box

とやるとダウンロードしてリストに突っ込んでくれる。
ちなみに、centOSってところは何でもよくて、このボックスファイルに名前を付けてる感じ。

開始

$ vagrant init centOS
$ vagrant up
これで起動するはず。

Vagrantをささっと使ってみる

背景

今回Vagrant使おうと思った背景は、家で仮想環境立ち上げるのにVirtualbox使ってSL入れようとしてインストールした。

そんで別ターミナルから接続しようと考えたときにネットワーク設定がめんどい。

Vagrantならとりあえずsshで接続できるじゃんと思ってVagrant。

繰り返し使えるし。

 

導入

Windows8マシン。

Virtualboxの4.3.12を手に入れてインストール。
4.3.14はバグってる。VirtualboxでOS立ち上げたときに謎エラーはく。
2014年7月28日現在、ググってみてもまだ誰も解決してないっぽいので4.3.12にダウングレードぜざるを得ない。

Vagrantは最新安定版1.6.3落としてきて、インストール
ページはここ　http://www.vagrantup.com/downloads.html

使ってみる

参考：http://docs.vagrantup.com/v2/getting-started/

$ vagrant init hashicorp/precise32
$ vagrant up

そうすっとBoxファイルダウンロードして適当に立ち上げてくれる。
hashicorp/precise32　ってのは、hashicorp社が提供しているprecise32って名前のBoxファイルっぽい？　
普通はaddしてあるboxのlistから探してくるんだろうけど、それがなかった場合にまずさがしに行くBox Providerがあるっぽい。

 

接続

Vagrant up終わったら

$ vagrant ssh
で仮想マシンへ接続。