月: 2019年4月

JCodecを使って任意のフレームを取得してみます。勘ですぐに気づくと思いますが、nextFrame()をひたすら読みだせばできそうです。 nextFrame() が返すオブジェクトのメンバーに frameNoというメンバもあります。

    //ダメな例
    fun getFrame(pos : Long) : Bitmap{
        val file = File("/sdcard/000.h264")
        val buf = NIOUtils.fetchFromFile(file)
        val es = BufferH264ES(buf)
        var nextFrame  =  es.nextFrame()
        val decoder = H264Decoder()
        val pic = Picture.create(1280, 1024, ColorSpace.YUV420)
        while(nextFrame != null && nextFrame.frameNo != pos){
            nextFrame  =  es.nextFrame()
        }
        val op = decoder.decodeFrame(nextFrame.data, pic.data).cropped()
        return AndroidUtil.toBitmap(op)
    }

これで指定したフレームのビットマップが得られそうに思うじゃないですか。ダメです。h.264は前フレームとの （正確な言い方じゃないけど） 差分を使います。なので、フレームごとにデコードしなければだめです。

    fun getFrame(pos : Long) : Bitmap{
        val file = File("/sdcard/000.h264")
        val buf = NIOUtils.fetchFromFile(file)
        val es = BufferH264ES(buf)
        var nextFrame  =  es.nextFrame()
        val decoder = H264Decoder()
        val pic = Picture.create(1280, 1024, ColorSpace.YUV420)
        while(nextFrame != null && nextFrame.frameNo != pos){
            val op = decoder.decodeFrame(nextFrame.data, pic.data)
            nextFrame  =  es.nextFrame()
        }
        val op = decoder.decodeFrame(nextFrame.data, pic.data).cropped()
        return AndroidUtil.toBitmap(op)
    }

これで取得できるのですが、終わりのほうのフレームが欲しい時に、これでは効率が悪いですよね？ということで、次に続く。

またAndroidのアプリを作りました。 DSGViewerです。日立の監視用デジタルレコーダーDS-Gシリーズ及びDS-JHシリーズの録画ファイルを見るためのアプリです。
Windows向けのビューワはあるのですが、Androidでも見れたら便利かなと。

たまたま（？）録画ファイルが手元にあり、調べたらフォーマットはそれほど難しい構造ではないので作りました。jpeg2000とかh.264とかは扱いに困りましたが。

ただ、万人向けでないので、需要はないと思います。

AndroidでJPEG2000を読み込む必要があったので調べた結果、jj2000を使うことにしました。しかし、JJ2000ライブラリは、いろいろな派生物があってどれを使っていいか悩みました。

自分は、Androidで使えるBitmapが取り出せるもので、
NFC_DriversLicenseReader のJJ2000を使うことにしました。jj2000自体はjj2000ライセンス（？）ですが、NFC_DriverLicenseReaderはMIT License です。

まず、 ダウンロードしてjj2000フォルダをプロジェクトにコピーします。私は、以下の場所にコピーしました。

ただ、このまま使うとBitmapが白黒になるので、一部修正します。
jj2000/j2k/decoder/Decoder.javaの378行のコメントを外し、次の行をコメントアウトします

      ImgWriterBitmap imwriter = new ImgWriterBitmapPPM(decodedImage,0,1,2);
//      ImgWriterBitmap imwriter = new ImgWriterBitmapPPM(decodedImage,0,0,0);	//モノクロ対応 2012.08.06 TK

あとは、

    val buffer = File("/sdcard/test.jp2").readBytes()
    val bmp = JJ2000Frontend.decode(buffer)

これでBitmapが得られます。参考に、MainActivityを次のように作って確認しました。

import android.support.v7.app.AppCompatActivity
import android.os.Bundle
import jj2000.JJ2000Frontend
import kotlinx.android.synthetic.main.activity_main.*
import java.io.File
import java.io.RandomAccessFile

class MainActivity : AppCompatActivity() {

    override fun onCreate(savedInstanceState: Bundle?) {
        super.onCreate(savedInstanceState)
        setContentView(R.layout.activity_main)
        val buffer = File("/sdcard/test.jp2").readBytes()
        val bmp = JJ2000Frontend.decode(buffer)
        imageView.setImageBitmap(bmp)
    }
}

以上です。

Handlerを使って 500ms間隔で 処理を実行する場合、以下のようにすると思います。ちなみにkotlinです。

    val handler = Handler()
    val runnable = object : Runnable {
        override fun run() {
            doHeavyWork() //重い処理
            handler.postDelayed(this, 500)
        }
    }

しかし、doHeavyWork()に処理時間が多くかかるばあい、その分の時間を差し引かなくてはいけません。例えば、 doHeavyWork() に300msかかるならpostDelayed(this, 200)にします。いや、そもそも doHeavyWork() にかかる時間は機種ごとに違うし、始めからわかってる事なんてほとんどないでしょう。

そこで、以下のようにします。

    val handler = Handler()
    val runnable = object : Runnable {
        override fun run() {
            val t = SystemClock.uptimeMillis()
            doHeavyWork() //重い処理
            handler.postAtTime(this, t + 500)
        }
    }

こんな感じにすると、いい感じになります。しかし、doHeavyWork()が500ms以上かかる場合はそもそも無理。video再生的なものならフレームをスキップするとか工夫が必要です。

NotifyReminderというアプリ公開しました。よくある通知領域にメモを置けるアプリですが、通知したメモを後から修正しやすくしたつもりです。まぁ、自分が欲しくて作ったのと勉強目的ですが。

ListViewの中に編集可能なTextViewを入れると、IMEが表示されるタイミングでListViewのサイズが変わり、編集中のTextViewからフォーカスが外れる。そして、1文字しか入力されない。

ひとまず、AndroidManifest.xmlのActivityの属性に

android:windowSoftInputMode = "adjustPan"

を加えると、解決しているっぽい。

以前作った同じようなListViewはたまたまサイズが小さくて、IMEが表示されてもリサイズされていないだけだった。

        val channel = NotificationChannel(channelID, title, NotificationManager.IMPORTANCE_DEFAULT)
        channel.setSound(null, null)

このように、setSound(null, null)で通知音が消えるとあったので試したが、どうしても消えない。通知の優先度を落としても消えない。かなり悩んだが、いったんアプリをアンインストールしたらうまくいった。いったん作ったチャンネルを削除しなければいけないのかな？