1 | $ git clone https://gist.github.com/kenzo0107/714ece62cf6450386ff0fb16fd5b777a |
作った経緯は
日本版・海外版URLがあり、
海外版に日本からアクセスした場合は
日本版サイトにリダイレクトさせたい、
という依頼があった為です。
このスクリプトを利用して
海外版サイト .htaccess等でリダイレクト設定をしました。
以上です。
Jenkins とは別のサーバ上に
SonarQube をインストールし
アクセスできるまでをまとめました。
今回は Jenkins からソースを解析し
SonarQube でのメトリクス情報を表示までの実行方法をまとめます。
言語は どれでも良いですが、 今回は PHP とします。
以下概要になります。
プロジェクトを作成しプロジェクトキーを発行します。
http://
デフォルトでは以下 admin:admin アカウントでログイン
| Item | Value |
|---|---|
| ID | admin |
| PW | admin |
以上で SonarQube 側の事前準備は終了です。
Jenkins の管理 > Plugin の管理
にて SonarQube Plugin インストール
以下オフィシャルダウンロードページからリンク取得
Analyzing+with+SonarQube+Scanner
1 | $ cd /var/lib/jenkins |
Jenkins の管理 > システムの設定 へアクセス
JenkinsQube servers に必要項目入力
上記入力後保存
「sonarqubeTest」という名前のジョブを新規作成します。
以上で Jenkins 側の設定完了です。
ちなみにこちら EC-CUBE 1.1 のプロジェクトでした。
EC-CUBE のコード重複率が多く
無駄が如何に多いかがわかります。
以上です。
AWS E2 インスタンス上に MySQL, SonarQube インストールし起動するものの
MySQL が落ちるという事象が発生。
ログを見ると以下のエラーが。。
1 | InnoDB: mmap(137363456 bytes) failed; errno 12 |
1 | Cannot allocate memory for the buffer pool |
割りあてるメモリがないという話。
なので、メモリを作ります。
1 | // 空ファイル作成 |
1 | # free |
1 | # systemctl restart mysqld |
1 | $ mysql -u <user> -p<pass> <db> -e "SHOW VARIABLES LIKE 'innodb_buffer_pool_size'" |
エラーログにあった 137363456 を下回ってるのがわかります。
この割当メモリを増やします。
左から順に検索し該当するファイルがあればその my.cnf を参照します。
/etc/my.cnf → /etc/mysql/my.cnf → /usr/etc/my.cnf → ~/.my.cnf
1 | # mysql --help | grep my.cnf |
自分の方では
my.cnf 上に innodb_buffer_pool_size の設定項目がなかったので
追加しました。
1 | [mysqld] |
1 | # systemctl restart mysqld |
1 | $ mysql -u <user> -p<pass> <db> -e "SHOW VARIABLES LIKE 'innodb_buffer_pool_size'" |
今回発生していたエラーログが消えました。
sonarqube は
Java, Python, Ruby, PHP 等、複数言語のコードメトリクス集計ができる
優れものです。
以前 MacOSX ローカル環境で
Unity プロジェクト C#コードのコードメトリクス抽出方法をまとめました。
今回は CentOS7 上に構築する方法を以下にまとめました。
1 | # cd /usr/local |
1 | # tar xvf jdk-8u45-linux-x64.tar.gz |
1 | # ln -s jdk1.8.0_45 latest |
.bash_profile での設定ではユーザにより環境変数が異なるので
全ユーザ共通で設定する場合は /etc/profile.d/ 以下に shell を用意する。
1 | # echo "export JAVA_HOME=/usr/local/java/latest |
今回は同一サーバに MySQL インストールしています。
別途 MySQL サーバを立てる場合は不要です。
1 | # yum -y install http://dev.mysql.com/get/mysql-community-release-el6-5.noarch.rpm |
以下サイトにてダウンロード zip を取得します。
SonarQube Donwloads
※ 2016-05-19 時点 最新は ver 5.5
1 | # mkdir /usr/local/sonarqube |
1 | # echo "setenv SONAR_HOME=/usr/local/sonarqube/sonar |
以下ファイルを編集し作成した DB にアクセスできるように設定します。
1 | sonar.jdbc.username=sonar # DB User |
以下ファイルを編集し SonarQube が利用する java コマンドを
インストールした JDK 内の java を指定するように変更
1 | #wrapper.java.command=java |
1 | # ln -s /usr/local/sonarqube/sonar/bin/linux-x86-64/sonar.sh /etc/init.d/sonar |
/etc/profile.d に設定した 環境変数を反映させるべくサーバ再起動します。
1 | # reboot |
http://<IPアドレス>:9000
SonarQube 管理ページが表示されれば OK です！
SonarQube の設定を見直すか、もしくは、
今回利用している ec2 t2.micro のような小メモリの場合
メモリ不足で MySQL が落ちる可能性があります。
以下参照して対応してください。
どんなプロジェクトでもここ修正したい！
と思うことは多々あるかと思います。
その際、なんとなくここ使いづらいから直そう！
という曖昧な判断ではなく
先立ってまず全体としてどういう状態にあるか、
を数値でみて判断する、
というプロセスが踏めるようになることを目的に導入しました。
次回は Jenkins からの実行方法をまとめます。
データ解析サービスを提供するサードパーティで
指定の Server, Path に指定形式で格納するように、
と指示がありました。
また、
「Protocol は sftp のみ許可でお願いします」
とも。
定期実行する必要もあったため
シェルで書けないかということで、
以下まとめました。
expect で通常、対話形式となるsftpコマンドの先読みでパスワードを通過
-oオプションで bachmode no を指定し以下のエラーを回避
1 | Permission denied (publickey,password). |
当方では、Jenkins や cron でシェルを定期実行する必要があった為
明示的にバッチファイルの内容を指定できるようにしています。
以上です。
Zabbix3.x 系での Slack への障害内容通知方法をまとめました。
簡単なメッセージの通知でなく
ある程度見やすく、状況判断しやすい様にしました。
↓ まずざっくりとこんな感じです。
Git に上げてます。ご参照ください。
話題の Line bot Api 用スクリプトを PHP で書きました。
とにかくシンプルに = カスタマイズしやすさ
という所で
修正する場所を限って利用できるようにしたつもりです。
適当に文字を打つと →「hello」
perfect と打つと → 「human」
と返すようにした本当にシンプルなものです。
そのロジック部分をカスタマイズすれば
マイ bot ができますね。
SSL は無料の StartSSL を利用しました。取得・設定は以下参照してください。
function getMessage で bot に返信させたいメッセージを決定しています。
そこで他 API を呼んだり、サイトからスクレイプしたり情報をとってきて返してあげると
簡易的なメッセージ返信 Line bot できあがりです。
rsync を Jenkins や crontab で利用する場合
SSH 経由で実行する際、
パスワードを求められ処理が中断してしまうということがあるかと思います。
その為、SSH で公開鍵認証という方法でパスワードを求めることなく
SSH アクセスできる様な設定を明示的にしました。
以下まとめます。
サーバ A → サーバ B へ 公開鍵認証で SSH ログインを目的とします。
以下手順です。
1 | [host A]# mkdir ~/.ssh |
1 | [host B]# cd ~ |
1 | [host B]# vi /etc/hosts.allow |
1 | # |
1 | [host B]# cp /etc/ssh/sshd_config /etc/ssh/sshd_config.bk |
1 | [host B]# vi /etc/ssh/sshd_config |
1 | #PubkeyAuthentication yes ← コメントアウトを外す |
1 | [host B]# diff /etc/ssh/sshd_config.bk /etc/ssh/sshd_config |
1 | [host B]# sshd -t |
1 | [host B (CentOS7)]# systemctl restart sshd |
以上で接続先サーバでの準備完了しました。
1 | [host A]# ssh 192.168.11.201 |
ログイン成功！
権限や所有権がよろしくない、
ということで認証失敗理由がわかります。
1 | # tail -f /var/log/secure |
以下デフォルトの sshd_config の設定の場合
パスワード認証と鍵認証、どちらも認証パス可能です。
1 | #PubkeyAuthentication yes |
インフラ専門の会社さんや街の噂では
デフォルトでどちらも認証 OK にしている企業さん多いという話でした。
以上です。
ある顧客データを抽出してレポートしたい、というときに
CSV ファイルで “090” などと携帯電話があると Excel で CSV ファイルを開いたときに
“90” になってしまうということがあるかと思います。
そんなときの為に特定列のみ数値を文字列扱いにしたときの内容まとめです。
1 | "090" |
とあったとすると
1 | ="090" |
のように整形することで文字列扱いになります。
例)
1 | "デミスハサビス",="09099999999","DeepMind" |
1 | "デミスハサビス","09099999999","DeepMind" |
1 | $ awk -F ',' '{print $1 ",="$2","$3}' tmp.csv |
上記のように 「=」 が追加されました。
1 | $ awk -F ',' '{print $1 ",="$2","$3}' tmp.csv > output.csv |
output.csv を Excel で開いてみます。
できました ♪
Excel を開く際、Windows ではデフォルト SJIS なので文字コードが UTF8 の場合、文字化けします。
以下 CSV ファイルを SJIS に文字コード変換します。
1 | $ nkf -sLw output.csv > output_sjis.csv |
以上です。
.htaccess に設定した通りに動作しない、そもそも読み込んでいないように見える場合の対策です。
http だと mod_rewrite でリダイレクトするけど、 https だとしない、とか
ありがちな設定ミスパターンは以下基本的なことを確認して解決できます。
/etc/httpd/conf/httpd.conf 等設定ファイル内で以下の記述が必要です。
1 | AllowOverride All |
利用頻度の多い mod_rewrite を利用するには以下が必要です。
まずは上記の確認です。
Apache の場合、大抵 modles ディレクトリ以下に格納されてます。
1 | $ ls -al /etc/httpd/modules/mod_rewrite.so |
Apache 設定ファイル/etc/httpd/conf/httpd.conf や /etc/httpd/conf.d/*.conf で以下を設定している。
※環境によっては /etc/httpd/conf/httpd.conf に設定ファイルを置いてない場合もあるので
あくまで一般的な例とします。
1 | LoadModule rewrite_module modules/mod_rewrite.so |
モジュール読み込み設定は大抵、
以下のように
以下例では「/var/www/html」ディレクトリ以下では 配置した .htaccess を優先して設定されることになります。
1 | <Directory "/var/www/html"> |
万が一 mod_rewrite.so モジュールが存在しない場合は Apache の再コンパイルが必要になります。
1 | $ sudo su - |
以上です。