Hello.

I am Paul Kinlan.

A Developer Advocate for Chrome and the Open Web at Google.

Extracting text from an image: Experiments with Shape Detection

Paul Kinlan

Google IOの後に少しダウンタイムがあり、長期にわたるかゆみを掻きたいと思いました。ブラウザの画像内に保持されているテキストをコピーしたいだけです。以上です。誰にとっても素晴らしい機能になると思います。 Chromeに機能を直接追加するのは簡単ではありませんが、Androidのインテントシステムを利用できることはわかっています。Web(または少なくともAndroidのChrome)でそれを実行できるようになりました。 二つの新しいWebプラットフォームへの追加-共有ターゲットレベル2(または私はそれが共有ファイルを呼び出すために好きなように)とTextDetector形状検出APIで- have allowed me to build a utility that I can Share images to and get the text held inside them 。 基本的な実装は比較的単純で、Service Workerで共有ターゲットとハンドラーを作成し、ユーザーが共有したイメージをTextDetectorしたら、 TextDetectorを実行します。 Share Target API使用すると、Webアプリケーションをネイティブ共有サブシステムの一部にすることができます。この場合、次のようにWeb App Manifest内で宣言することにより、すべてのimage/*タイプを処理するように登録できます。 "share_target": { "action": "/index.html", "method": "POST", "enctype": "multipart/form-data", "params": { "files": [ { "name": "file", "accept": ["image/*"] } ] } } PWAをインストールすると、次のように、画像を共有するすべての場所でPWAが表示されます。 Share Target APIは、共有ファイルをフォームポストのように扱います。ファイルがWebアプリと共有されると、サービスワーカーがアクティブになり、ファイルデータを使用してfetchハンドラーが呼び出されます。現在、データはService Worker内にありますが、現在のウィンドウで必要になります。処理できるように、サービスはどのウィンドウがリクエストを呼び出したかを知っているので、クライアントを簡単にターゲットにしてデータを送信できます。 self.addEventListener('fetch', event => { if (event.request.method === 'POST') { event.

Read More

Barcode detection using Shape Detection API

Paul Kinlan

もう1週間、ChromeのCanaryチャンネルにあるShape API経由の顔検出についてお話しました。現在、バーコードの検出はChrome Canaryでも行われています(Miguelは私のヒーローです); バーコードは巨大です!彼らは我々が購入するほとんどすべての製品にあります。多くの悪意を持ったQRコードは、米国とヨーロッパ以外の国でも巨大である。バーコードとQRコードは、メディアとあなたとの間で少量のデータを転送することによって、物理世界とデジタル世界をつなぐ簡単な方法を提供します。これはデスクトップの時代には莫大な量の使用ではないかもしれませんが、モバイルの時代にはそれは重要です。このデータにアクセスするためだけにアプリをインストールする必要はありません。 シェイプ検出APIは、ユーザーのデバイスの下にあるハードウェア機能の上に標準インタフェースを作成し、主に顔検出とバーコード検出という新しい機能セットをWebプラットフォームに開くため、面白いです。 バーコード検出APIは、現在WICGにあるShape Detection APIに基づいています。 wicg /)は、インキュベーションおよび実験段階にあることを意味する。 Androidではさまざまな1Dおよび2Dのバーコードを検出できますバーコード: 1D barcodes: EAN-13, EAN-8, UPC-A, UPC-E, Code-39, Code-93, Code-128, ITF, Codabar 2D barcodes: QR Code, Data Matrix, PDF-417, AZTEC さらに: It automatically parses QR Codes, Data Matrix, PDF-417, and Aztec values, for the following supported formats: URL Contact information (VCARD, etc.) Calendar event Email Phone SMS ISBN WiFi Geo-location (latitude and longitude) AAMVA driver license/ID Shape Detection APIは現在Chrome Canary(M57)にあり、 chrome:// flags /#enable-experimental-web-platform-featuresで有効にする必要があります

Read More