ubuntu+epgrec(UNA版)+pt3環境構築

から lasas | - | PT3

Ubuntuを普通にインストールし、その上でepgrec UNA版をインストールする覚書です。USBメモリにインストールする投稿が目立っていた為、UNA版を使う際にはUSBメモリかSSDが必要と誤解を与えてしまったようなので、epgrec UNA版のインストールのみ投稿を別にしました。USBbootするUbuntu-NAS① epgrec+pt3+minidlna+kvm環境を構築するの投稿から最低限必要な設定のみ取り出しただけです。最後に最新のpt3の録画品質についての所感を追記しました。

構築条件

UbuntuServer(13.10、14.04)。64bit版。
HDDは500G以上を推奨（500Gだと最高画質の30分4Gで計算すると50時間強）。
epgrec (UNA版)+ pt3
nginxを利用（Apacheは使っていないので注意）

必要なハードウェア

OSがwindowsではなくLinuxなので、純粋に必要なハードウェア代金のみ。格安サーバと、pt3、2.5inch HDD、メモリ2G以上（4G以上推奨）の構成が必要です。Bay-TrailとNT-ITX/PW120Plus環境は後追いで作ってみたいと思っています。

サーバ本体（格安サーバか、80plus gold以上の電源で構築。メモリは最低2Gbyte。個人的にはBay-TrailとNT-ITX/PW120Plusで作りたい。）
pt3
カードリーダ
低消費電力HDD（運用して気づきましたが、1TB以上が無難です。低容量だとすぐにHDDがあふれてしまうので。）

BSも見れると番組の幅が広がります。セルフで工事する分には最安6000円でBSを映せるはずです。BS/CSの環境整備については衛星放送(BS/CS)　録画／視聴のまとめを参照。

epgrec環境構築例(本家/STZ版/UNA版)

epgrecの環境構築例が当Blog内に数パターンある為、構成別にまとめました。参考にしてください。

投稿	構成	難易度	コメント
ubuntu+epgrec(UNA版)+pt3環境構築	epgrec(UNA版) + nginx + php5-fpm	低	epgrec(UNA版)インストールの最小構成です。
USBbootするUbuntu-NAS① epgrec+pt3+minidlna+kvm環境を構築する	epgrec(UNA版) + nginx + php5-fpm	中	USBメモリ(SSD可)にUbuntuをインストールし、録画はRAID構成のHDDに行っています。単純にディスクの延命対策と低消費電力化するテクニックを使っているだけなので、USBメモリはSSDと読み替えてもらってOKです。②、③の記事まで実行するとminidlnaやsamba、KVMまでが同居する環境になります。
ubuntu13.10+epgrec(本家)+pt3+nginx+php5-fpm 環境構築	epgrec(本家) + Apache	中	本家です。安定して運用出来ます。開発が止まっているようです。
ubuntu13.10+pt3+STZ版epgrec+nginx+php5-fpmの環境構築	epgrec(STZ版) + nginx + php5-fpm	低	STZ版はepgrecやrecpt1等をまとめて公開してくれているので、組合せによるトラブルが出にくいので、構築しやすいです。最近まではSTZ版をメインに利用していました。今はUNA版に移りつつあります。
ubuntu13.10+pt3+epgrecの環境構築	epgrec(STZ版) + Apache	低	上記のApache版。nginxとApacheを比べるとnginx上に構築した方がweb画面の遷移が速いが、Apacheの方がセットアップは楽なのでnginxで挫折した方向け
消費電力30W以下　Ubuntu13.04＆PT2/PT3＆epgrec サーバを作る	epgrec(STZ版) + Apache	低	PT2を最新カーネルでビルドする方法も一緒に書いています。
組み合わせを選ぶ基準として epgrecは本家、STZ版、UNA版と色々な版を開発者の方が出して下さっていますが、開発が既に止まっているものもあります。現状で開発が活発なのはUNA版となります。3種ともに比較させて貰いましたが、構築が一番楽なのがSTZ版、便利に使えるのがUNA版、本家は安定運用実績が多い為、カスタマイズ(プログラム修正)したい場合に向くと言う感想を持っています。
コメント欄について各記事のコメント欄で、コメントの最初に『【雑談】』と書いてもらえれば、情報交換の為に閲覧者間での雑談に使ってもらって構いません。メールアドレスは公開されないのでフリーのメアドでも使って下さい。誹謗中傷はしない方向でお願いします。

Ubuntuのインストール

『Ubuntu14.04 LTSのインストールと初期設定（全体的にスクリーンショットで解説）』を参照してインストールを済ませておいてください。特記事項は特にありません。IPアドレスは固定IPにしておいた方が良いと思います。

ntpのインストール


sudo apt-get install ntp

service ntp stop

ntpdate ntp.ubuntu.com
service ntp start

MySQL、nginx、PHP等のインストール

apacheで環境構築するのが普通ですが、今回はApacheを使いません。かわりに軽量のHTTPとリバースプロキシのサーバを兼ねたnginxを使います。更にnginxでリバースプロキシの設定を行い、epgrecはphp5-fpmで動かすことにします。

何故、Apacheではなくnginx＋php5-fpmを使うかと言うと、速いからです。

sudo apt-get install nginx php5-fpm  php5-cli mysql-server mysql-client php5-mysql
sudo apt-get clean

at.denyの修正

at.denyが設定されていると予約が出来ないので、/etc/at.denyを修正します。面倒なのでsedコマンドで。

# 以降、rootユーザーでの作業となるので、rootになっておく。
sudo su -
sed -i 's/www-data//g' /etc/at.deny

php.iniの修正

はまりやすい箇所のようなので、書き方を工夫しました。/etc/php5以下のphp.iniは全部修正してください。

# php.iniのすべてに対して、disable_functionsのコメントアウトと、date.timezoneの設定を行う。
# findでphp.iniを検索して、他にも該当ファイルがあればそれらも修正してください。
find /etc/php5 -name php.ini

cp /etc/php5/fpm/php.ini /etc/php5/fpm/php.ini.bak
sed -i 's/disable_functions/;disable_functions/g' /etc/php5/fpm/php.ini
sed -i 's/;date.timezone =/date.timezone = &quot;Asia\/Tokyo&quot;/g' /etc/php5/fpm/php.ini

diff /etc/php5/fpm/php.ini /etc/php5/fpm/php.ini.bak

cp /etc/php5/cli/php.ini /etc/php5/cli/php.ini.bak
sed -i 's/disable_functions/;disable_functions/g' /etc/php5/cli/php.ini
sed -i 's/;date.timezone =/date.timezone = &quot;Asia\/Tokyo&quot;/g' /etc/php5/cli/php.ini

diff /etc/php5/cli/php.ini /etc/php5/cli/php.ini.bak

mysql は、apt-getでインストールした後に、ロケール設定をutf-8に切り替えておきます。

vi /etc/mysql/my.cnf

/etc/mysql/my.cnfの中の[client]と[mysqld]の下に下記の設定を付け加えます。

[client]
default-character-set=utf8

[mysqld]
character-set-server=utf8

service mysql restart

# 念の為、MySQLが起動している事を確認しておく
ps aux | grep mysql

DBを作成します。

mysql -uroot -p
create database epgrec;
grant all on epgrec.* to epgrec@localhost identified by 'yourpassword';
flush privileges;

PT3とepgrecの下準備

epgrecのセットアップ前にPT2/PT3のドライバをインストールして、USBカードリーダを使えるようにしておきます。


# 共通して必要なソフトのインストール
sudo apt-get install pcscd libpcsclite1 libpcsclite-dev libccid pcsc-tools git build-essential autoconf unzip pkg-config

pcsc_scan | grep &quot;Japanese Chijou Digital&quot;

# echo &quot;&lt;&lt;&lt;&lt;&lt; PT3 Driver &gt;&gt;&gt;&gt;&gt;&quot;

PT3のドライバインストール

sudo su -
cd /tmp
echo &quot;blacklist earth-pt1&quot; &gt;&gt; /etc/modprobe.d/blacklist.conf
git clone https://github.com/m-tsudo/pt3.git
cd pt3/
make clean &amp;&amp; make &amp;&amp; sudo make install
reboot

# 再起動後に、/dev/pt3video0～3がある事を確認する。
ls -la /dev/pt*video*

PT2のドライバインストール

PT3のみの人は無視してください。最近、PT2用のドライバは改変なしでカーネル3.8.0以上に対応できるようです。コミットログにもそのようにコメントがありましたので。


cd /tmp
rmmod earth_pt1
sudo echo &quot;blacklist earth-pt1&quot;  &gt;&gt; /etc/modprobe.d/blacklist.conf

wget http://hg.honeyplanet.jp/pt1/archive/tip.tar.bz2
tar -jxvf tip.tar.bz2
cd /tmp/pt1-c8688d7d6382/driver
make clean &amp;&amp; make &amp;&amp; sudo make install
reboot

# 再起動後に、/dev/pt1video0～3がある事を確認する。
ls -la /dev/pt*video*

recpt1の用意

cd /tmp
wget http://hg.honeyplanet.jp/pt1/archive/c44e16dbb0e2.zip
unzip c44e16dbb0e2.zip
cd pt1-c44e16dbb0e2/arib25
make clean &amp;&amp; make &amp;&amp; make install

cd /tmp
wget http://hg.honeyplanet.jp/pt1/archive/tip.tar.bz2

tar -jxvf tip.tar.bz2
cd /tmp/pt1-c8688d7d6382/recpt1

# PT2/3混在環境の場合にはpt1_dev.hの/dev/pt1video**を
# 必要個数、pt3video**のようにPT3用に書き換えます。
# PT1/PT2のみの場合には、pt1_dev.hの書き換えの必要は無い。

# pt3のみの環境の場合には、sedで一括置換でOKです。
sed -i 's/pt1video/pt3video/g' pt1_dev.h

./autogen.sh
./configure --enable-b25 &amp;&amp; make &amp;&amp; make install
recpt1 -version

# 下記のように出力されればOK。

# recpt1 1.2.0
# recorder command for PT1/2 digital tuner.

# 序に録画テストも行っておく
cd /tmp
recpt1 --b25 --strip 27 20 test.ts

UNA版の必要ソフトウェアのダウンロード

作者さんが公開してくださっているので、適当な何かの別館のこのページから次の2ファイルをダウンロードし、サーバの/tmpにコピー（Linuxホストからはscp、windowsからならwinscpを利用）して下さい。ダウンロード時にパスワードが必要ですが、作者さんのサイト適当な何かの別館をきちんと見ればわかります。

epgdumpUNA130928.tar.gz
epgrec_UNA_140126.tar.gz

epgdump(UNA版)のインストール

epgdump、epgrecはwinscp等で予め/tmpディレクトリ以下にアップロードしておいてください。


cd /tmp

tar -zxvf epgdumpUNA130928.tar.gz

cd /tmp/epgdump
make &amp;&amp; sudo make install

cd /tmp

# recpt1のテストで出力したTSファイルから番組表が取得できるか確認する。

epgdump  27 test.ts test.xml -xml

# xmlファイルが出来ている事を確認しておく。
cat test.xml

epgrec(UNA版)のインストール

tar -zxvf epgrec_UNA_140126.tar.gz
# readmeが入っているので読む。PT3を使っているので、パッチはあてない方向で。
cat readme.txt

mv epgrec /var/www/

chown -R www-data:www-data /var/www/epgrec
cd /var/www/epgrec

chmod 777 cache templates_c video thumbs settings
chmod 666 thumbs/index.html video/index.html
chmod 755 do-record.sh
chown www-data:www-data do-record.sh
vi config.php

config.phpは設定方法がきちんと書かれているので、コメントを読みながら調整します。今回は下記のようにしました。

define( &quot;TUNER_UNIT1&quot;, 2 );  // 0 =&gt; 2に変更。PT3が2枚なら4。
define( &quot;TUNER_UNIT2&quot;, 0 );  // 未使用との事なので、そのままにしておく
define( &quot;USE_RECPT1&quot;, TRUE ); // FALSE =&gt; TRUEに変更。

nginxの設定を行う

vi /etc/nginx/nginx.conf

httpセクションの直下にcharset UTF-8;を追記します。

http {
 charset UTF-8;

下記の設定を追記。デフォルトで他の設定があったらコメントアウトでOK。

vi /etc/nginx/sites-enabled/default

server {
  listen 80 default_server; #★default_serverで無い場合には、listen 80;のみでOKです。
  root /var/www;
  index index.html index.htm index.php;
  server_name usblinux; #★ここはご自身のLinuxサーバのホスト名に変更してください。
  location / {
	  try_files $uri $uri/ /index.html;

	  location ~ .php$ {
	    fastcgi_split_path_info ^(.+.php)(/.+)$;
	    fastcgi_pass unix:/var/run/php5-fpm.sock;
	    fastcgi_index index.php;
	    include fastcgi_params;
	  }
	}
}

service nginx restart

ブラウザから設定を行う

http://ipアドレス/epgrec

にアクセスして画面の指示通りに設定を進めてください。

設定画面は非常に解り易く作られているので、説明を見ながらでも十分に設定可能です。取りあえず、最初の画面と、最後のEPG受信時の画面を載せておきます。

録画ファイル名の形式やその他の設定値について

個人的なメモです。『%YEAR%%MONTH%%DAY%_%HOUR%%MIN%_%TYPE%%CH%_%TITLE%』で運用してみます。FILESYSTEM_ENCODING定数に返還前の文字コードを設定する事が出来るとありましたが、epgdumpでxmlをはかせてからnkf –guessで文字コードを調べたところ、UTF-8 (LF)でxmlファイルが出力されているようだったので、特にFILESYSTEM_ENCODING定数は変更しませんでした。ここは微調整するかもしれません。

あと、ページに表示する番組表の長さは、Apacheの場合には8時間程度にしておかないと遅くて我慢できませんが、nginx+php5-fpmの場合には、24時間にしても十分に速い為、18時間にしました。

※ ページに表示する番組表の長さを24時間にしたら、現時刻を示す赤線が表示されなくなり、予約しようとすると『予約できません』とエラーになりました。24時間に設定すると宜しくないようです。18時間に設定し直したら直りました。回避策が妥当だった為、特に原因調査はしていません。

epgrec設定時の注意事項（RAMディスクを使っている場合のみ）

step3で『shepherd.php::テンポラリー容量が不十分なため衛星波のEPG更新が出来ません。空き容量を確保してください。』と言うエラーが出た場合には、単純に/tmpの容量が小さいです。/etc/fstabの/tmp用に確保したRAMディスクの容量を大きくします。

最後に、設定が終わって、step6の画面になると、EPGの受信画面になります。そこで、1つ1つ受信する方式（getepg.php）と、全チューナー総動員で受信するパターン（shepherd.php）に分かれる様です。/tmpディレクトリは768m程度しかありませんので、1つ1つ受信する方式（getepg.php）を選択します。下図の赤枠の方ですね。

番組表更新のgetepgをcronに登録する

sudo cp /var/www/epgrec/cron.d/getepg /etc/cron.d/
sudo vi /etc/cron.d/getepg

# getepgの実行時間は適宜変更します。
# デフォルトだと、2時間おきに○時29分になったら番組表の更新処理がされるみたいです。
# 作者さんのデフォルトの指定がベストチョイスだったのでそのままにしました。
# 29 */2 * * *   www-data /var/www/epgrec/getepg.php

最新ドライバでのpt3の録画品質について

以前はpt2の方がフレームドロップが少ない（ほぼ0）傾向があったのですが、最新のpt3のドライバは録画品質が初期に比べて著しく向上してきています。コミットログを見ると、順調に更新して下さっているようです。一番最初にこちらで構築事例をアップした時は、高速で流れるテロップが多少乱れたりしていたのですが、既にそのような事もなくなっていました。

更にいうと、ffmpegで2パスエンコードする際に10/135ぐらいの確率でエンコード失敗していたのが、エンコード失敗が無くなっていました。レガシーなPCIを搭載するマザーボードも数が少なくなってきたことから、そろそろPT2を使っている環境も移行の時期かもしれません。ずっと前に環境構築したままの場合には、再構築してみるのも良いかもしれませんね。再構築する場合には、PT3の3枚挿しまではやった事がありますよ。

タグ epgrec, PT3, ubuntu14.04 LTS. ブックマークするパーマリンク.