iOS 11 には活用できる新しい機能が無数にありますが、その多くは API の形で内部的に提供されており、その効果を最大限に得るには App Store アプリが必要です。
Iryss は、脱獄コミュニティではZiph0nとしてよく知られている Florian Hebrard が開発した新しいアプリで、Apple の最新の CoreML (機械学習) API を活用して、周囲の物体をリアルタイムで認識します。
Iryssの使い方は、カメラを何かに向けるだけです。わずか数ミリ秒で、アプリは画面上のテキストからフレーム内の物体を推測します。また、物体検出時に音声でアナウンスするように設定することもできます。
Iryssは生物と無生物の両方を認識できます。動物の場合、一般的な品種や種を識別できるほど賢くなっています。
Iryss アプリ内で、希望どおりに動作するように構成できる設定がいくつかあります。
ここでは、アプリが検出した物体をテキストで表示するだけでなく、音声で読み上げるように設定できます。また、物体の識別に成功したことを示す触覚フィードバックも有効にできます。このアプリは広告でサポートされているため、この設定パネルで広告を非表示にするためのアプリ内購入も行えます。
では、このアプリはどれほどうまく機能するのでしょうか?まあまあですが、完璧ではありません。おそらく、アプリがオブジェクトを本来の姿とは異なるものとして誤認識することが、予想以上に多いでしょう。例えば、このガムボールマシンは「薬瓶」として認識されますが、これはおそらく内部の色のついたドットのせいでしょう。
アプリの機能に大きな支障をきたす要因の一つとして、撮影条件の悪さが挙げられます。正確な測定結果を得るためには、可能な限り最適な照明条件を確保し、被写体全体がフレーム内に収まる程度の距離を保つことをお勧めします。
開発者によると、物体検出は常に正確とは限らないものの、常に改善できるとのことです。機械学習によって開発者がこの種のアプリを簡単に作成できるようになったため、Iryssは定期的なアップデートによって精度を向上させることができるはずです。
確かに、一見すると Iryss はほとんどのユーザーにとって奇抜なものに思えますが、すぐに思いつく限りでは、現実世界でこのアプリが役立つ用途が少なくとも 2 つあります。たとえば、
- 視力が低下して iPhone に代わりに見てもらう必要がある場合、Iryss は音声によるアナウンスを行って、その人の周囲にあるものを伝えることができます。
- 親が幼い子どもに物や名前の学習を促したい場合、子どもは Iryss で遊びながら、周囲の物とその名前について学ぶことができます。
他のユーザーにとって、Iryss は、楽しみのために試してみることができる概念実証アプリにすぎません。
Iryss を試してみたい方は、App Store から無料でダウンロードできます。iOS 11 の機械学習の能力を実際に体験するのに最適な方法です。この API によって、今後さらに多くの素晴らしいアプリが実現できるようになるでしょう。
Iryssのコンセプトは気に入りましたか?ぜひ下のコメント欄であなたの考えを共有してください。