Google Developers Japan: Mozc

Gboard 物理手書きバージョンの舞台裏

2018年4月6日金曜日

Gboard 物理手書きバージョンキーボード上のキーを探してキーとなる

システムの概要図 機械学習モデルの構築訓練データの収集

GitHubREADME

データの前処理

[("e", 0), ("d", 55), ("c", 102), ("u", 428), ("j", 507)]

QWERTY キー配列と x, y 座標系の対応

[((2.5, 1), 0), ((3.0, 2), 55), ((3.5, 3), 102), ((6.5, 1), 428), ((7.0, 2), 507)]

[((0.00, 0.00), 0), ((0.11, 0.50), 55), ((0.22, 1.00), 102), ((0.89, 0.00), 428), ((1.00, 0.50), 507)]

「い」を描画した例 MobileNet によるモデルの軽量化ドメイン知識の活用

「あ」と書かれたストロークの方向分解特徴

「あ」と書かれたストロークの時間的特徴 Points scored

確認用データセットにおける各特徴量の有無による正確度の比較

畳み込み層（カーネル: 3x3、フィルタ数: 32、ストライド: 2、活性化関数: Relu）

分離式畳み込み層（カーネル: 3x3、フィルタ数: 64、ストライド: 1、活性化関数: Relu）

分離式畳み込み層（カーネル: 3x3、フィルタ数: 128、ストライド: 2、活性化関数: Relu）

分離式畳み込み層（カーネル: 3x3、フィルタ数: 128、ストライド: 1、活性化関数: Relu）

全結合層

nazoru-input パッケージnazoru-input nazoru-traininghttps://github.com/google/mozc-devices/raw/master/mozc-nazoru/data/strokes.zip

$ pip install nazoru-input

$ nazoru-training ./data/strokes.zip

nazoru-trainingnazoru-training --help ハードウェアでの推論nazoru-input パッケージnazoru-inputnazoru-input

$ pip install nazoru-input

$ nazoru-input

nazoru-input のコード

from nazoru import get_default_graph_path

from nazoru.core import NazoruPredictor

predictor = NazoruPredictor(get_default_graph_path())

# [(key, ms_from_first_input)]

sample_input = [('e', 0), ('d', 100), ('c', 200), ('v', 300),

('u', 800), ('j', 900)]

results = predictor.predict_top_n(sample_input, 5)

for result in results:

print('kana: %s, key: %s, probability: %.3f' % result)

nazoru-inputnazoru-inputCAD データ

物理手書きコンバーターのプリント基板図面 ブラウザでの推論TensorFlow.jsnazoru-trainingTensorFlow.js convertertensorflowjs_converternazoru-trainingNazorunet/Predictions/Reshape_1

$ pip install tensorflowjs

$ tensorflowjs_converter \

--input_format=tf_saved_model \

--output_node_names='Nazorunet/Predictions/Reshape_1' \

/nazorunet/saved_model \

/nazorunet/web_model

web_model.pb (the dataflow graph)

weights_manifest.json (weight manifest file)

group1-shard\*of\* (collection of binary weight files)

tfjs-converter npm

import * as tfc from '@tensorflow/tfjs-core';

import {loadFrozenModel} from '@tensorflow/tfjs-converter';

const model = await loadFrozenModel(

'/nazorunet/web_model.pb',

'/nazorunet/weights_manifest.json');

// Gets a canvas or image element.

const inputImage = document.getElementById('input-image');

const result = model.execute({input: tfc.fromPixels(inputImage)});

// Returns predicted probabilities for each class in a float array.

const probs = result.dataSync();

console.log(probs) // Float32Array(88) [...]

Core Concepts in TensorFlow.js まとめ参考文献Shuhei Iitsuka - UX EngineerMakoto Shimazu - Software Engineer

Android 版 Google 日本語入力をアップデートしました。（2.16.1968.3）

2014年11月6日木曜日

グリフハックIngressGoogle 日本語入力におけるシステム要件の更新について主な変更点マテリアルデザインに対応マテリアルデザインNoto フォント新しい Roboto フォント

文字の入力方法を改善

(Lollipop) ハードウェアキーボード用の候補ウィンドウ

(Lollipop) 入力方法切り替えキー

顔文字の拡充

音声入力へのショートカット

絵文字入力へのショートカット

日本語ハードウェアキーボードのレイアウト情報を同梱 (Android 4.1 (Jelly Bean) 以降)詳しい設定方法はこちらをご覧ください。その他の更新

中国語 (簡体、繁体) と韓国語による設定画面の表示に対応しました。

タブレット向けにサイズの調整を行いました。

32bit MIPS アーキテクチャ, ARM 64bit アーキテクチャのサポートを開始しました。

問題の修正プロダクトフォーラム松崎剛士 Software Engineer

Android 版 Google 日本語入力をアップデートしました。（1.15.1780.3）

2014年4月25日金曜日

鈴木拓生 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、松崎剛士から Google 日本語入力の開発版のアップデートについての寄稿をもらいました。]Google 日本語入力におけるシステム要件の更新について主な変更点

（Android 4.1, Jelly Beans 以降) 記号入力画面から Unicode 絵文字を入力できるようにしました。

ユーザー辞書のエクスポートに対応しました。

（Android 4.0, Ice Cream Sandwitch 以降) 音声入力に対応しました。字種切り替えキーの長押しでご利用いただけます。

長押し可能なキー（字種切り替えキーとスペース) のデザインを変更しました。

URL およびメールアドレス入力時に、QWERTY キーボードのカンマをそれぞれスラッシュとアットマークに置き換えました。

（Android 4.0, Ice Cream Sandwitch 以降) TalkBack 等のアクセシビリティサービスに対応しました。

プロダクトフォーラム

Google 日本語入力におけるシステム要件の更新について

2014年3月14日金曜日

鈴木拓生 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、小松弘幸から Google 日本語入力の最低動作環境についてのお知らせです。- 鈴木]

Windows Vista SP2 以降（XP はサポート終了）

Mac OS 10.7 （Lion）以降（Leopard, Snow Leopard はサポート終了）

Android 4.0 （Ice Cream Sandwitch）以降（Eclair, Froyo, Gingerbread, Honycomb はサポート終了）

プロダクトフォーラム

Google 日本語入力の開発版をアップデートしました。（1.13.1650.10x）

2013年12月9日月曜日

鈴木拓生 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、隅田洋から Google 日本語入力の開発版のアップデートについての寄稿をもらいました。- 鈴木]WinMac共通の変更点

同期機能を廃止しました。同期対象の辞書のデータは以下のいずれかの方法で保存できます。

手元にある同期対象の辞書は、廃止後も削除されずそのままご利用いただけます。
ユーザー辞書のエクスポート機能を使って、明示的にデータをバックアップすることも可能です。

[1/6 Update] 細かな問題を修正したバージョン (1.13.1651.10x) と、安定版 (1.13.1641.x) をリリースしました。プロダクトフォーラム

Google 日本語入力開発版の同期機能廃止について

2013年12月2日月曜日

鈴木拓生 Developer Relations Team[Google 日本語入力チームから Google 日本語入力開発版の同期機能廃止についての寄稿をもらいました。- 鈴木]以前のブログ

手元にある同期対象の辞書は、廃止後も削除されずそのままご利用いただけます。

ユーザー辞書のエクスポート機能を使って、明示的にデータをバックアップすることも可能です。

プロダクトフォーラム

Google 日本語入力の開発版をアップデートしました。（1.12.1599.10x）

2013年11月11日月曜日

山崎富美 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、松崎剛士から Google 日本語入力の開発版のアップデートについての寄稿をもらいました。- 山崎]毎年同じ事を考えていますWinMac共通の変更点

ローマ字入力モードにて日本語でないと思われる文字列が入力された時に、ローマ字変換が行われる前の文字列を変換候補に表示する機能を追加しました。

辞書を更新しました。

Windows 版の変更点

Windows 7 以前の環境で、クラシックテーマを使用していると言語バーのアイコンが正しく表示されないことがある問題を修正しました。

Windows 8 以降の環境で、タスクバーに表示された Google 日本語入力のアイコンをクリックしても IME のオンオフ状態が切り替わらない問題を修正しました。

Windows 8 以降の環境で、MS-IME からの辞書のインポートが機能しない問題を修正しました。

Windows 8 以降の環境で、Internet Explorer がフォーカスされているとき、タスクバーのメニューや言語バーのメニューからツール類が起動できない問題を修正しました。

保護モードを有効化した状態の Adobe Reader と Adobe Flash をサポートしました。

同期機能の廃止について

手元にある同期対象の辞書は、廃止後も削除されずそのままご利用いただけます。

ユーザー辞書のエクスポート機能を使って、明示的にデータをバックアップすることも可能です。

[11/15 Update] 安定版をリリースしました (1.12.1590.x)。変更内容は開発版に準じます。 [11/28 Update] 開発版と安定版を更新しました ( 開発版 : 1.12.1601.x, 安定版 : 1.12.1591.x ) 。ローマ字変換が行われる前の文字列を変換候補に表示する機能を設定で無効化できるようにしました。また、同機能が安定版で常に無効になっている問題を修正しました。プロダクトフォーラム

Google 日本語入力の安定版をアップデートしました。（1.11.1515.x）

2013年8月16日金曜日

山崎富美 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、隅田洋から Google 日本語入力の安定版のアップデートについての寄稿をもらいました。- 山崎]Google 日本語入力共通の変更点

カーソルの周辺文字列を考慮した変換を行うようになりました。現在のところ、カーソル前のアルファベットまたは数字のみを認識します。この機能は、カーソル周辺文字列の取得に対応したアプリケーションのみで有効です。

Web から構築した辞書を更新しました。

Windows 版の変更点

IME の変換モードが変更されたとき、変更後のモードがカーソル付近に表示されるようになりました。この機能により、現在の変換モードを把握しやすくなります。モード表示が不要な場合は、設定によりオフにすることもできます。

Windows 8 以降の環境で、「アプリウィンドウごとに異なる入力方式を設定する」設定が無効のときに、意図せず変換モードが変更されることがある問題を修正しました。

Windows 8 以降の環境で、InputScope API によるモード変更をサポートしました。

Windows 8 以降の環境で、タッチスクリーン環境に最適化されたソフトウェアキーボードが使用できるようになりました。

Windows 8.1 Preview 環境で、高 DPI 設定が有効なとき、候補ウィンドウなどが意図した場所に表示されない問題を修正しました。

Mac 版の変更点

英数キーのダブルタップによるアルファベットへの変換、かなキーのダブルタップによる再変換に対応しました。

[8/16 Update] Mac 環境において一部のアプリケーションに対してクラッシュを引き起こす問題を修正したバージョン（1.11.1516.1）をリリースしました。 [8/26 Update] Windows 環境において Explorer 上で候補ウィンドウなどが表示されなくなる問題等、いくつかの問題を修正したバージョン（1.11.1517.0）をリリースしました。Google 日本語入力バージョン 1.11.1515.0 で問題が発生していた場合、バージョンが 1.11.1517.0 以降に更新されていることを確認後に Windows を再起動していただくと解決します。現在のバージョンは「ばーじょん」という文字を変換していただくことで確認できます。 [8/30 Update] Windows XP 環境においてキー入力をとりこぼすことがある問題を修正した安定版（1.11.1518.0）および開発版（1.11.1523.100）をリリースしました。 [9/2 Update] Mac 環境において一部のアプリケーションで入力が遅くなる問題を修正した安定版（1.11.1525.1）および開発版（1.11.1530.101）をリリースしました。 [9/5 Update] Mac 環境において入力が遅くなる問題を改善した安定版（1.11.1526.1）および開発版（1.11.1531.101）をリリースしました。プロダクトフォーラム

Google 日本語入力の開発版をアップデートしました（1.11.1490.10x）

2013年7月2日火曜日

山崎富美 Developer Relations Team[Google 日本語入力チームのソフトウェアエンジニア、隅田洋から Google 日本語入力の開発版のアップデートについての寄稿をもらいました。- 山崎]WinMac共通の変更点

クラウド同期でアップロードされたデータについて、データの削除方法を変更しました。設定ダイアログからではなく、ダッシュボードページからデータの削除を行うようになります。

Web から構築した辞書を更新しました。

Windows 版の変更点

Windows 8 環境で、「アプリウィンドウごとに異なる入力方式を設定する」が無効のときに、一部の API による IME モード変更を無視するようになりました。この変更により、IME の変換モードが意図せず変更される問題が修正されます。Windows 8 環境で、API を利用して Google 日本語入力の IME モードを変更するには、InputScope API を使用してください。

Mac 版の変更点

英数キーのダブルタップによるアルファベットへの変換、かなキーのダブルタップによる再変換に対応しました。

既知の不具合

~~Windows 8 環境でかな入力モードが正常に動作しません。~~
~~Windows 7 以前の環境でかな入力モードをご使用の場合、Ctrl-c や Ctrl-v といったショートカットキーが正常に動作しません。~~
~~かな入力モードをご使用の方は、Google 日本語入力安定版をお使いください~~

[7/9 Update] Windows 環境において、かな入力をお使いの場合に発生する問題を修正したバージョン（1.11.1502.10x）をリリースしました。以前のバージョンでは、かな入力が正常に動作しない、かな入力時に Ctrl-c や Ctrl-v といったショートカットキーが正常に動作しないといった問題がありました。
[7/30 Update] Windows 環境におけるいくつかの問題を修正したバージョン（1.11.1520.10x）をリリースしました。

プロダクトフォーラム

Gboard 物理手書きバージョンの舞台裏

Android 版 Google 日本語入力をアップデートしました。（2.16.1968.3）

Android 版 Google 日本語入力をアップデートしました。（1.15.1780.3）

Google 日本語入力におけるシステム要件の更新について

Google 日本語入力の開発版をアップデートしました。（1.13.1650.10x）

Google 日本語入力開発版の同期機能廃止について

Google 日本語入力の開発版をアップデートしました。（1.12.1599.10x）

Google 日本語入力の安定版をアップデートしました。（1.11.1515.x）

Google 日本語入力の開発版をアップデートしました（1.11.1490.10x）

ラベル

ブログアーカイブ

Feed

ラベル

ブログ アーカイブ

Feed

ブログアーカイブ