ドキュメントトーカカメラトーク


02949 2014/06/25 11:38:22


クリエートシステム開発の小出です。
カメラアプリ「ドキュメントトーカカメラトーク」を
昨日、Google Play にアップしました。
カメラをかざすだけというコンセプトですが
そうもいかなくてシャッターが介在するものもあります。
できることは
・情景文字認識(単語認識)
・簡単な物体認識(予定)
・QRコード/バーコード読み上げ
・色
・明るさ
・顔写真
です。
情景文字認識と顔写真はシャッター動作が入ります。
オートフォーカスを音で表してますので
ピントが合ったタイミングで
シャッター(ほぼ画面全体)を押して下さい。

ヘルプ画面は、基本はブラウザー表示ですが
Talkback使用時は「Play」「Next」「Back」だけの
ボタンにしました。使ってみてください。
ご意見、ご要望、ありましたらお気軽にどうぞ。

なお、無料アプリです。

あと、「ドキュメントトーカ NFCトーク 」と
「ドキュメントトーカ ビーコントーク 」
というものを予定しております。








02950 2014/06/25 13:20:57


平瀬です。

早速試させていただきました。

NTTドコモ情景認識は、シャッターを切ると落ちることもありますし、ブラウザ接続でプレイストアに行くときもあります。
A4のレジュメを講習会の前に読めるといいのですか・・・・・今後に期待しています。
ゴーグルは、お札やクレジットカードを判別するアプリですね。前から使っています。
色検出、明るさ検出もなかなかいいと思います。
QRコード、バーコード検出は適当にカメラを向けても読み取ってくれますし、その後表示されるブラウザの操作性もいいと思います。
顔検出カメラ、うまく自分撮りができるといいのですが。




02962 2014/06/28 17:51:44


平瀬です。

ドコモ文字情景文字認識ですが、かなりの確率で落ちます。
ネットに接続して認識はするのですが、認識が落わった直後に落ちます。





02963 2014/06/28 21:36:00


齋籐デス。
私も、平瀬さんと同じようなところで落ちます。
私は、ドコモの、l-05eデス。

アンドロイド4.2で、ソフトウエアと、ドキュメントトーカも最新です。
以上。




02964 2014/06/28 21:56:46


gqs。
うちは問題なし。
ドキュメントトーカカメラトークは。
android4.3やけど。
しゃったーきったら画像認識中と出てそれでokやな。





02965 2014/06/29 08:12:00


gqsさん

どれくらいの大きさの原稿まで文字認識できていますか?




02967 2014/06/29 16:16:59


西尾です。
小出さん ドキュメントトーカ カメラトーク開発ありがとうございます。
私の環境は ドコモSH-07D android4.0 通信はワイファイのみ ですが試してみました。

1.ドコモ情景文字認識

まだうまく使いこなせてはいませんが用紙を平らで明るいところにおいて、用紙と
の距離15cmぐらいのところが一番認識率が高いようです。それ以上離れると文字なしとなります。明るさやカメラの解像度にもよると思います。
はがきの宛名シールで試したら 郵便番号 住所の一部と私の名前を認識してくれたときはちょっと感動しました。
用紙によって最高50単語ぐらいを一度に認識しましたが、認識率はパソコンのOCRソフトのようにはいかず、10%ぐらいでしょうか。
A4で常駐下と3回認識させてみてどういう内容の用紙なのかがかろうじて判別できるぐらいかなという感じです。
平瀬さんのおっしゃるような用途にはまだまだだと思われます。
でもこういった専用機があって認識辞書をクラウドでどんどん精度を高めてくれたら、用紙にかざすだけで読み上げてくれるようなものができるかもしれませんね。

2.色検出

 これはだいたい正確に判別していると思われます。
音声の読み上げは1秒に1回ぐらいのほうがいいのではないかなと思えました。


3.明るさ検出

 これはカメラのレンズからではなく画面のほうでチェックしているようです。
明るい治療室で測定してみたところ まっくら 日の出 曇り空 満月の夜 という内容でしたが、たとえばルックスの数字を読み上げてくれるモードなどもあればいいなと思えました。
カメラの露出測定も室内では くらい しか言わないのでこれも数値で表現してくれるといいなと思えました。
これも読み上げは1秒に1回ぐらいのほうがいいかなと思えました。

4.顔検出カメラ

カメラをどこに向けても3秒ほどでオートフォーカスが停止します。 シャッターボタンのところにふれると 「顔は検出されません」というメッセージが出ています。
もちろん私の顔に向けても同じでした。

以上です。





02968 2014/06/29 19:28:08


gqs。
アウトカメラで撮影するときにすまほを真っ直ぐに立てて顔からだいぶんカメラを離した状態で右に
動かしたり左に動かしたりした時に左に1しんとうの顔とかやや左に2しんとうのかおとかセンターつまり真ん中になんしんとうの顔というように聞こえたら自分の顔が全部レンズの中にきちんと収まった状態やけんその辞典でシャッターを切るということや。
顔がレンズより右にずれたら左になんしんとうの顔というように出てくる。
逆に顔がレンズより左にずれたらやや右になんしんとうの顔というように出てくるけんの。





02969 2014/06/30 07:03:14


gqsさん みなさん こんにちは。  西尾です。
アウトカメラで撮影するときにすまほを真っ直ぐに立てて顔からだいぶんカメラを離した状態で右に動かしたり左に動かしたりした時に左に1しんとうの顔とかやや左に2しんとうのかおとかセンターつまり真ん中になんしんとうの顔というように聞こえたら自分の顔が全部レンズの中にきちんと収まった状態やけんその辞典でシャッターを切るということや。
顔がレンズより右にずれたら左になんしんとうの顔というように出てくる。
逆に顔がレンズより左にずれたらやや右になんしんとうの顔というように出てくるけんの。

 うちの環境ではこの前の段階でとまってしまっているようです。
何度試しても同じなので androidのバージョンによるのかなと思えます。





02970 2014/06/30 07:06:51


gqs。なるほどなー。
うちは今は4.3やけど近々4.4にアップデートされるけどな。android4.0なら途中で止まるんやろか。
今環境は4.1と4.3しかないけんな。





02972 2014/06/30 08:20:05


平瀬です。

西尾さん

フロントカメラに切り替えると、鈴虫が鳴いてくれません。
そのため、私も顔を見つけるのに苦労します。

それから、文字認識が落ちるのは、どうやらSC-06Dのにのようです。




02973 2014/06/30 08:25:03


みなさん、おはようございます。
ギャラクシーS4の小林です。

gqsさん、ギャラクシーS4がアンドロイド4.4になるんですか?




02974 2014/06/30 08:28:40


おはようさん。gqs。
そうや。
4.4になる。
アルファとかsc06dはならん。





02975 2014/06/30 08:30:48


gqs。
バックに変更してみ?
カメラを。





02976 2014/06/30 08:36:17


gqs。
さっきのアップデートの詳細はこれじゃ。
Android(TM)4.4へのバージョンアップ予定製品について
https://www.nttdocomo.co.jp/info/notice/page/140626_00_m.html





02977 2014/06/30 08:37:21


gqs。
フロントカメラは自分撮りの時に使うもんやけどこれは反応はせんかもわからんけんバックカメラに切り替えてみ?
アウトカメラや。





02978 2014/06/30 08:56:00


gqsさん、小林です。。
どうもです。
カメラもgqsさんと同じように動作してます。
s4が、アンドロイド4.4になったら、どんな動きになるんでしょうねぇ?




02979 2014/06/30 09:04:00


gqs。多分大きな差はないと思う。安定して動作今でもしよるしな。
けど4.2以降になってからやけど時々すまほ再起動せんかったら入力が不安定になったりするようなことが全くなしんなったなー。





02980 2014/06/30 09:07:11


小林さんgqs。
アウトカメラに切り替えてほんでスマホを垂直にした状態で右に倒したり左に倒したりしたらドキュメントトーカーカメラトーク起動しとるときにやや左に1しんとうのかおとかやや右に1しんとうの顔いうて読み上げしよるやろ?
それではきちんとレンズに収まってないけんの。
センターになんとうしんの顔いうて読み上げた時がレンズにきちんと収まっとる状態。焦点がきちんとおうとるいうことや。





02981 2014/06/30 09:08:29


gqsさん、他人の顔は検出できるけれど、自分撮りがうまく行かないということです。





02982 2014/06/30 09:09:55


だけんアウトカメラに切り替えてやってみということやが。
メニュー押したら8つ項目が出てきてカメラ切り替えをタップしたらインカメラからアウト・インカメラに切り替わるけん。
gqs。





02983 2014/06/30 10:08:13


クリエートシステム開発の小出です。
みなさん、カメラトークご使用ありがとうございます。

顔写真ですが、自分撮りの場合(フロントカメラ)、
オートフォーカス機能がついていないカメラが多数あるようです。
その場合、鈴虫は鳴きません。
また、落ちる場合、メモリーが足りなくて落ちるケースがほとんどです。
その場合カメラ解像度を落としてみてください。
オートというのは中間あたりの解像度となっています。

鈴虫が鳴り終わったということは、ピントが合ったということですから(時々嘘)
連続的に鈴虫が鳴っているということは、ピンボケ状態が続いていることを意味します。
このときは、設定の「オートフォーカスセンサー精度」の数字を大きくしてください。
数字が小さいと手首の少しの揺れでオートフォーカス動作が再始動してしまい連続的に鈴虫が泣き出す原因となります。

シャッターに触れて押しっぱなしにして左右フリックするとズームが可能です。








02984 2014/06/30 11:35:42


西尾です。
平瀬さん
それから、文字認識が落ちるのは、どうやらSC-06Dのにのようです。

ドコモの認識サービスにアクセスする前後にOSが停止してしまうんでしょうか。
 通信がらみの問題かもしれませんね。 ワイヤレスネットワークをOFFにして ワイファイで試してみるとどうでしょうか。
でも認識精度はいまいちよくないので実用的には使う用途があまりないかもしれませんね。





02985 2014/06/30 13:30:47


平瀬です。

顔写真ですが、自分撮りの場合(フロントカメラ)、オートフォーカス機能がついていないカメラが多数あるようです。
その場合、鈴虫は鳴きません。

納得しました。

また、落ちる場合、メモリーが足りなくて落ちるケースがほとんどです。
その場合カメラ解像度を落としてみてください。

最低にしても落ちます。
ネットで認識するためサーバと通信した後、何か一言しゃべり、画面が消灯した後落ちます。
改造度を最低にしてもダメです。
タスクキラーでメモリは800MB以上は空いています。




02986 2014/07/01 09:37:30


平瀬さん、小出です。
GoogleのReportで確認しました。
OutofMemoryで落ちているとReportされています。
画像を扱っていると内部メモリーがすぐパンクします。
古い端末ほど起きやすいはずです。
パンクしたら何もしないで抜けるようにし、とりあえず落ちないように修正しました。
顔検出も、ある時期から感度が悪くなったと感じていますのでそれも調査してみます。






03042 2014/08/04 18:21:21


gqs。ドキュメントトーカーカメラtalkでエラーが発生。
具体的には
1:ドキュメントトーカーカメラトークを起動。
2:物体検出をタップ。
5秒ほどしたらドキュメントトーカーカメラ・トークは動作を停止しました。レポートとokが出る。
この状態。
機種はsc-04e。
androidのバージョンは4.4.2。




03043 2014/08/05 19:25:50


gqsさん、ありがとうございます。

小出です。

原因が分かりました。

新規インストールして物体検出を使う前に

顔カメラとかQRコードとかを使ってもらえれば大丈夫なようです。

すぐアップデートしますが、顔カメラで1枚撮ってから

試してみてください。



遅ればせながら、物体検出という機能が追加になりました。

「物体検出」を選び、メニューの「登録物体の一覧・編集・削除」を選び

再度「メニューの新規物体登録」を選んで物体の写真を撮ります。

まず、物体名を入力し、カメラで物体を狙い撮影ボタンを押します。

いろいろな角度から何度でも撮影できます。

「戻る」ボタンで撮影を終了します。

これで、1物件登録されました。

最初の物体検出まで戻っていただいて、物体にカメラを向けると

さあ、喋ってくれるでしょうか!!

この機能はOpenCVの機能のひとつを利用して作ってみました。

ORB特徴量検出器を用いた画像認識とでも呼ぶんでしょうけど

そんなに簡単にうまくはいかないものです。








03044 2014/08/05 19:45:44


小出さんこんばんは。gqs。
どうやらわしの知恵名的なミスやったみたい笑
自分の顔を一枚撮影して保存。
それから物体検出をタップ。
その後は落ちることがなくメニューボタン押して登録物体の一覧をタップ。
それからメニューを押して物体の新規登録から自分の顔を撮影してみた。
物体名はとりあえず顔と入力。
そして撮影。
それで戻って物体検出ボタンを押す。
そして撮影した物体にカメラを向けたら顔の場合は一人の人物と一人の顔と言うように音声で読み上げることを確認しました。




03045 2014/08/05 20:12:55


小出さんこんばんは。gqs。
どうやらわしの致命的なミスみたいです笑。

自分の顔を一枚撮影して保存。
それから物体検出をタップ。
その後は落ちることがなくメニューボタン押して登録物体の一覧をタップ。
それからメニューを押して物体の新規登録から自分の顔を撮影してみた。
物体名はとりあえず顔と入力。
そして撮影。
それで戻って物体検出ボタンを押す。
そして撮影した物体にカメラを向けたら顔の場合は一人の人物と一人の顔と言うように音声で読み上げることを確認しました。




03139 2014/09/18 13:29:51


加藤さん、小出です。
ドキュメントトーカカメラトークには
OpenCV Managerという画像処理用のアプリを必要とします。
はいっていない場合には、Package not found というアラートが出ます。
OpenCV Manager package was not found! Try to install it?
とでていますので、Yesボタンを押して
GooglePlayからインストールしてください。





03234 2014/12/19 12:08:12


クリエートシステム開発の小出です。
ドキュメントトーカボイスナビと
ドキュメントトーカカメラトークをアップデートしました。
ドキュメントトーカボイスナビは、
地図表示画面をダブルタップするとポップアップメニューが開くようになりました。
・端末の向いている方向
・現在地の詳細
・経路の案内
試験運用ですが、設定でビーコンを使用するにしておけば、
・ビーコンメッセージ
・ビーコン検出リスト
・ビーコン登録・編集
・ビーコンクラウドログイン
といったメニューが出ます。

メッセージの登録されたビーコンの近くに行くと
そのメッセージを音声で通知してくれます。

ポップアップメニューを表示して
ビーコン登録・編集メニューが見えていれば、
自分自身のメッセージを登録できます。

ビーコンの詳しい説明は以下で。
http://www.createsystem.co.jp/DTalkerBeaconSystem.html


ドキュメントトーカカメラトークは簡単な機能修正のみです。

以上、よろしくお願いいたします。







03259 2014/12/24 08:53:09


山賀です。

nexus9 Android5.0
上でアプリが動作しません。

OpenCV Managerのパッケージがみつかりませんでした。

のメッセージがでますが、端末にはパッケージはインストールできています。
いちおう再インストールもしてみましたが、変化はありませんでした。

Android4.2の端末では動いているので、パッケージが5.0に対応できていないか画面サイズに対応できていないのかなと思っています。




03260 2014/12/24 09:37:55


山賀さん、小出です。
情報ありがとうございます。
Nexus5, GalaxyS4のAndroid5.0では動作しています。
CPUが対応していないのかもしれませんね?






03416 2015/05/19 09:31:10


 MLのみなさん、いつもお世話になっています。
マリナー、sc-05gを使用しております。
 実はドキュメントトーカカメラトークが使えなくて困っています。
 通常通りドキュメントトーカカメラトークをインストールし、
その後opencvマネージャーをインストールしました。
そしてカメラトークを使おうと試みると、
「パッケージのっとファンド」
「opencvライブラリーパッケージオズノットファンドtrytoインストールアイティ?

その下に「no]or[yes]
と出てきます。[yes]を選択するとプレイストアに入り、「アイテムはありません。
」となります。
[no]を選択すると、そのまま元のカメラトークの画面に戻ります。
 再起動を行ったり、カメラトークとopencvマネージャーをアンインストールして
再びインストールしたのですが、結果は同じでした。
 ドキュメントトーカのバージョンは、1.3.1です。
 わかりにくい文章になってしまってすみませんが、
どなたかアドバイスをお願いします。








03417 2015/05/19 21:23:48


山賀です。

その後opencvマネージャーをインストールしました。

このアプリですが、対応していないCPUがあるようです。
私のnexus9は非対応で同じようなメッセージがでて使用できませんでした。
sc-05gはサムスンの独自CPUを使っているようなので同じ理由かなと推測します。




03420 2015/05/20 09:09:22


 マリナーです。
 山賀さん、いつも的確なアドバイスをありがとうございます。
端末によって使えないアプリがあるということなんですね。
私が今まで使用していたP-02Eは、ドキュメントトーカカメラトークが使えていたので、なぜSC-05Gでは使えないのかと思っていました。
 この度はありがとうございました。
 これからもよろしくお願いします。




03542 2015/07/22 05:32:51


 おはようございます。藤川です。

KG@らくスマPです。

読み上げるというのが、比較したことがないので、実はどの程度なのか分からなかったりしますが、こちらでは画面をなぞると建物名や住所を読み上げたり、サウンドも鳴っております。

 はい、そこまでは同じだと思います。

 今最新版で確認していないので、もしかしたら改善されているかもしれませんが、
たとえば拡大・縮小を行なった場合、「縮尺いくつ(数字)、南北何キロメートル、東西何キロメートルの範囲を表示しています。中心はどこそこ(番地やランドマーク名)です。」
といった読み上げが行なわれるでしょうか? 

 こういった細かな読み上げの違いは、ドキュメントトーカカメラトークにもあったと思います。
これはドキュメントトーカ内部で独自に呼び出している読み上げ機能が、通常版のTalkbackに依存しているためなのだろうと想像しています。
間違っていたらごめんなさい。

 そんな訳で、周りにいるラクスマプレミアムのユーザさんには、ドキュメントトーカカメラトークや触地図は積極的にお勧めしていなかったりします。

 すみません。今日は7時過ぎから出かけるので、これから仕度をしなければなりません。
帰宅は夜9時頃になると思うので、明日最新の環境で検証して、あらためてご報告いたします。




05240 2019/06/27 09:14:22


小出です。
ドキュメントトーカカメラトークの中に物体検出というものがあります。
これもGoogleのAIを使用したものです。
無料ですのでお試しください。
文字認識も結構なものです。
なお、NTTDocomoのエンジンは現在では使用できません。







06246 2022/10/03 17:14:41


皆様

せせらぎです。

富士通のArrowsで、ドキュメントトーカカメラトークの文字認識を試そうとしましたが、「無効」になっています。


購入時はアンドロイド11でしたが、現在は更新して12です。

可能でしたら、アンドロイド12への対応を希望いたします。

以上です。






06247 2022/10/03 19:56:05


せせらぎです。

追記いたします。

先ほどドキュメントトーカカメラトークの文字認識を起動したところ、正常に動作することが確認できました。

数日前までは、文字認識のみのみ「無効」と発声しつつも起動でき、「使用できるようになるまで、しばらく時間がかかります」という旨のメッセージが表示されていました。
なぜ突然使用できるようになったのかは不明です。

参考になりましたらさいわいです。

以上です。




    Android-ML 過去ログ に戻る