2010年6月9日水曜日

Juliusパラメータとレイテンシ,スループット

-b, -b2, -sb, -m, -n
のパラメータを適当に動かして計測
結果より,-b 以外のパラメータはデフォルト値の付近では
あまりレイテンシやスループットに影響をもたらさない(?)

大きな値を設定するようにすると変化が生じるかもしれない
(議事録の作成などでは,デフォルト値よりもかなり大きな値を使う)

---

実験結果や資料などをweb上にアップロードしたいが
このブログ上ではできないし,研究室のgoogleサイトも容量の問題がある
どこか適当な場所はないだろうか

自分のdropboxアカウント上に上げる,という手もあるけど……

2010年6月2日水曜日

StreamJulius : TODO : jconfと応答速度,スループットの評価

-b, -b2, -sb, -s, -m などのパラメータをデフォルトの値より低くした場合の
応答速度,スループットの変化を調べる.

すべてのパラメータを動かのは実験のパターンが増えすぎるので,
実験の際は一つを除いたパラメータをデフォルトの値に固定する.

ソース数は4,コア数は16で行う.

StreamJulius : スケールアウト実験結果

前回と同じコンフィグ,テストデータを使い,ソース数4で実行
コア数のみを変動させる.

1,2,4コアの場合はst05のみ
8コアの場合はst05~06
12コアの場合はst05~07
16コアの場合はst05~08
を認識用ノードとして使用した.

結果
コア|スループット
|話者数| mbps
1| 3.68| 0.94
2| 6.49| 1.66
4| 11.61| 2.97
8| 22.93| 5.87
12| 33.46| 8.57
16| 43.57|11.16


各コア数の設定に対して一回しか実験を行っていないので,
統計的な信頼区間は不明

2010年5月27日木曜日

StreamJulius : 動作確認実行

M=5, N=16

音声ファイルとして4.11秒のファイルをひとつ用意 (test1.wav)
これを150個並べただけの入力ファイルを5個用意.

結果,レイテンシの最小値は1.31秒,最大値は14.86秒となった.
(後のほうの入力のほうがレイテンシが大きくなるのは当たり前である.
レイテンシを評価基準にする場合,このあたりをどう説明するか)
また,スループットの値は総発話時間/総処理時間で求めたところ
43.43となった.

---

ちゃんとしたテストセット(ファイルごとに発話時間が異なる)を使って実験を行いたい

解決 : StreamJulius : PE数がおかしい

なんのことはない,spadecのオプションに
-p FMAN
を付け忘れていただけだった.

StreamJulius : PE数がおかしい

(解決済み)

ソースプロセス数M,デコーダプロセス数Nとなるように
かいたspadeのプログラム(UDOPは空)をコンパイル
してみたところ,コンパイル時に出力されるPE数が
想定している値と異なってしまう.

sa07をソースと時間計算,sa08をシンク,
st05から08をデコーダに割り当てているのだが,
想定しているPE数が

sa07: M+1
sa08: 2
st05 + st06 + st07 + st08: N
合計: M+N+3

なのに対して,実際にコンパイルしてみると

sa07: 3M+1
sa08: 2
st05 + st06 + st07 + st08: 2N
合計: 3M+2N+3

となってしまう.

ソースコード:
/nfs/home/nishii/work/streams/test/julius_st2/julius_st2.dps

2010年5月12日水曜日

libsentの定数LOG_DEBUGがStreamsの何処かと名前衝突

libsent/include/sent/stddefs.h - L.171
の LOG_DEBUG が,
おそらく Streams 上のマクロと名前がかぶっているらしく,
このままでは,UDOPヘッダ上で
#include
とするとUDOPをコンパイルできなくなる.

なので,この LOG_DEBUG を適当な名前(DUMMY_LOG_DEBUG)に
置き換えたヘッダファイルをインクルードするようにしてUDOPをコンパイルする.

なお,このダミーのヘッダファイルは,libjulius/libsent のコンパイルには
使わないこと.

参照 : /nfs/home/nishii/work/julius-4.1.4-fpic/libsent/include.fix4streams