Confidence Methodology¶
jpcite の Confidence は、「検索して見つかるか」「実務で再利用されるか」を、利用状況の集計から推定するための指標です。
これは品質をよく見せるための自己採点ではなく、ユーザーがどの領域で安心して使えるか、どの領域はまだ慎重に見るべきかを示すための公開指標です。
見ている指標¶
| 指標 | 意味 |
|---|---|
| Discovery | 検索・取得したときに、該当する結果を返せた割合 |
| Use | 一度使われた機能が、一定期間内に再利用された割合 |
| Coverage note | その領域で、どのデータが十分で、どこに限界があるか |
表示方法¶
各ツールまたはデータ領域ごとに、次の情報を表示します。
- 推定値
- 95% 区間
- サンプル数
- データの注意点
サンプル数が少ない領域では、推定値が高くても信頼区間を広く表示します。少数の成功例だけで「高精度」と見せないためです。
集計の考え方¶
Confidence は、利用者単位の詳細ではなく、ツールや用途ごとに集計します。個別の顧客、API key、検索文そのものを公開することはありません。
新しいツールは、利用データが少ないため最初は区間が広くなります。一定数の利用が蓄積されるまでは、数値を過大に解釈しないでください。
プライバシー¶
- 個別顧客が識別できる粒度では公開しません。
- 生の検索文や個人情報を公開ダッシュボードに出しません。
- 集計値は、用途・ツール・大きな利用者カテゴリに丸めます。
限界¶
Confidence は、jpcite が返した結果の利用実績を表す指標です。行政判断、税務判断、法的判断の正しさを保証するものではありません。
実申請・税務処理・法務判断の前には、一次資料、担当窓口、専門家による確認が必要です。