WeChat MiniProgram AR AI
1.0.0
| 日付 | コンテンツ |
|---|---|
| 2022-12-12 | 新規追加：AI人物検出、AI手検出、AR画像追跡など、AR地下鉄概略図。削除: AI ターゲット分類の package_image_classify ディレクトリ。 AI 顔検出の古いバージョンの package_face_detect ディレクトリ。 |
| 2022-10-27 | 新規追加：AI顔検出（新バージョン）、AIテキスト検出など |
| 2022-09-20 | 新機能: 単一サンプル検出機能。更新: webglBusiness.js が最新の正式バージョンにアップグレードされ、Android のディープ コンフリクト現象の修正コードも保持されました。修正: 1. 開発者ツールをプレビューすると、サイズが 2MB を超えているというメッセージが表示されます。 2. Three.PlaneGeometry、Three.BoxGeometry などのテクスチャ マップが黒くなり、同時に画面がミラーリングされ、ちらつきます。 |
| 2022-01-05 | 新規追加： 1. AR空間音声 2. AR+AI画像分類 3. ARトイロボットの動画撮影機能を追加。 |
| 2022-01-01 | 修復: Android スマートフォンの画面深度の競合を変更する 3 番目の方法。 |
| 2021-12-24 | 修正: 上部のナビゲーション バーを使用して、Android 携帯電話での深さの競合現象をブロックします。 |
| 2021-12-23 夜 | 更新: 1. 平面追跡の 3D モデルのデフォルト サイズをカスタマイズできます。 2. 3D モデルの姿勢が行列更新 (matrixAutoUpdate=false) から属性更新 (matrixAutoUpdate=true) に変更されます。マトリックスなしで調整できます。 |
| 2021-12-23pm | 修正: Android スマートフォンの画面の左上隅に雪の結晶が表示される |
| 2021-11-30 | 新規追加： 1. AR試着メガネ 2. AR測定定規 3. 平面に固定されたARおもちゃロボット |
このプロジェクトには、次の AR および AI のサンプルが含まれています。
1. AR+ コンテンツ: AR 平面トラッキングを使用しておもちゃのロボットを表示します。ディレクトリ package_world_track。
2. AR + 効率: AR を使用して、平面上のオブジェクトの長さを測定します。ディレクトリ package_measure。
3. AR+ゲーム: AR を使用して、ユーザーの位置における空間音声の変化を追跡します。ディレクトリ package_spatial_audio。
4. AI顔検出（新バージョン）：AIが検出した顔の姿勢に基づいて、仮想メガネを顔に装着します。カタログ package_face_detect_v2。
5. AI テキスト検出: 写真やカメラ画面内のテキストを検出します。カタログ package_text_detect。
6. AR 画像追跡: 画像を使用して平面画像の姿勢を検出します。ディレクトリ package_image_tracker。
7. AI単一サンプル検出: 1枚の画像のみを使用して、実環境内のターゲットオブジェクトの位置を検出します。ディレクトリ package_oneshot_tracker。
8.AI人体キーポイント検出：人体のキーポイントと姿勢を検出します。カタログ package_body_detect。
9.AI手のキーポイント検出：手のキーポイントとジェスチャーを検出します。ディレクトリ package_hand_gesture。
10. 上海の地下鉄路線図: 自然かつインタラクティブな方法で地図を表示します。カタログ package_plane_track。
AI顔検出（旧バージョン）：AIが検出した顔の姿勢に基づいて、人物の顔に仮想メガネを着用します。カタログ package_face_detect。 (古いバージョンの API は正式にメンテナンスされなくなったため、削除されました。)
AR+AI: AI を使用して画像内のオブジェクトを検出し、オブジェクトに名前を表示します。ディレクトリ package_image_classify。 (アプレットはメモリ不足で終了することが多いので削除します。)
平面追跡
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/plane.html
顔キーポイント検出（新バージョン）
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/face.html
テキスト検出
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/ocr.html
画像追跡
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/marker.html
単一サンプルの検出
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/osd.html
人体キーポイント検出
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/body.html
手のキーポイントとジェスチャーの検出
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/hand.html
RGBAカメラ画像を取得
https://developers.weixin.qq.com/miniprogram/dev/api/ai/visionkit/VKFrame.getCameraBuffer.html
フロントページ
おもちゃのロボットが部屋の床に立っています。
画面をタップして測定を開始します。カーソル位置を測定物の両端に合わせてください。
もう一度画面をタップすると測定が終了します。
バージョン V1 の測定結果は不正確です。正確な測定を行うには、バージョン V2 を使用してください。
ユーザーが携帯電話を持って動き回ると、ユーザーの距離に応じてプレーヤーの音量が変化します。赤い飛行機の後ろで、プレイヤーの音が消えます。
106 個の特徴点の位置。このプロジェクトでは、インデックス値 78 (左目) と 79 (右目) の 2 つの特徴点を使用します。
回転した顔の検出
カメラ画面内の中国語、英語、数字などをリアルタイムに検出します。
識別マップ
おもちゃのロボットを見せる
ショーボックス
19の重要なポイント
コサイン距離を使用して、放送体操の 8 セット目の動きを決定します。
ストレッチ運動
胸を大きくするエクササイズ
横の動き
21の重要なポイント
ユークリッド距離を使用してジャンケンのジェスチャーを決定します。
布のジェスチャー
はさみのジェスチャー
石のジェスチャー
地下鉄の路線図をデスクトップに固定して、新聞のように地図を読みます。
1. WeChat 開発者ツールを使用してプロジェクトのソース コードを開き、携帯電話でプレビューします。
2. モデルが読み込まれない、画像が表示されないなどの状況が発生した場合は、ミニ プログラムのデバッグ モードをオンにしてください。
ソース コード内の定数 robotUrl を変更します。
// 机器人模型
const robotUrl = 'https://m.sanyue.red/demo/gltf/robot.glb' ;
