WeChat MiniProgram AR AI
1.0.0
| 날짜 | 콘텐츠 |
|---|---|
| 2022-12-12 | 신규 추가: AI 인간 감지, AI 손 감지, AR 이미지 추적 등, AR 지하철 회로도. 삭제: AI 대상 분류의 package_image_classify 디렉터리입니다. AI 얼굴 감지 이전 버전의 package_face_Detect 디렉터리입니다. |
| 2022-10-27 | 신규 추가 : AI 얼굴 인식(새 버전), AI 텍스트 인식 등 |
| 2022-09-20 | 새로운 기능: 단일 샘플 감지 기능. 업데이트: webglBusiness.js가 최신 공식 버전으로 업그레이드되었으며 Android 심층 충돌 현상에 대한 수정 코드도 유지되었습니다. 수정 사항: 1. 개발자 도구를 미리 볼 때 크기가 2MB를 초과한다는 메시지가 표시됩니다. 2. Three.PlaneGeometry, Three.BoxGeometry 등의 텍스처 맵이 검게 변하고 화면이 동시에 미러링되고 깜박입니다. |
| 2022-01-05 | 새로 추가됨: 1. AR 공간 오디오 2. AR+AI 이미지 분류 3. AR 장난감 로봇에 비디오 녹화 기능이 추가되었습니다. |
| 2022-01-01 | 수리: 안드로이드 폰의 화면 깊이 충돌에 대한 세 번째 수정 방법입니다. |
| 2021-12-24 | 수정: Android 휴대폰에서 상단 탐색 표시줄을 사용하여 깊이 충돌 현상을 차단합니다. |
| 2021-12-23 밤 | 업데이트: 1. 평면 추적을 위한 3D 모델의 기본 크기를 사용자 정의할 수 있습니다. 2. 3D 모델이 매트릭스 업데이트(matrixAutoUpdate=false)에서 속성 업데이트(matrixAutoUpdate=true)로 변경되어 3D 모델의 자세를 변경할 수 있습니다. 매트릭스 없이 조정할 수 있습니다. |
| 2021-12-23pm | 수정: Android 휴대폰 화면의 왼쪽 상단에 눈송이가 표시됩니다. |
| 2021-11-30 | 신규 추가: 1. AR 체험 안경 2. AR 측정자 3. 평평한 표면에 고정된 AR 장난감 로봇 |
이 프로젝트에는 다음과 같은 AR 및 AI 예제가 포함되어 있습니다.
1. AR+ 콘텐츠: AR 평면 추적을 사용하여 장난감 로봇을 표시합니다. 디렉토리 package_world_track.
2. AR+효율성: AR을 사용하여 평면에 있는 물체의 길이를 측정합니다. 디렉토리 패키지_측정.
3. AR+게임: AR을 사용하여 사용자 위치의 공간 오디오 변화를 추적합니다. 디렉토리 package_spatial_audio.
4. AI 얼굴 감지(새 버전): AI가 감지한 얼굴 자세를 기반으로 얼굴에 가상 안경을 착용합니다. 카탈로그 package_face_Detect_v2.
5. AI 텍스트 감지: 사진과 카메라 화면에서 텍스트를 감지합니다. 카탈로그 package_text_Detect.
6. AR 이미지 추적: 이미지를 이용해 평면 이미지의 자세를 감지합니다. 디렉토리 package_image_tracker.
7. AI 단일 샘플 감지: 하나의 사진만 사용하여 실제 환경에서 대상 개체의 위치를 감지합니다. 디렉토리 package_oneshot_tracker.
8. AI 인체 핵심 포인트 감지: 인체 핵심 포인트 및 자세를 감지합니다. 카탈로그 package_body_Detect.
9. AI 손 주요 포인트 감지: 손 주요 포인트 및 제스처를 감지합니다. 디렉토리 package_hand_gesture.
10. 상하이 지하철 노선도: 자연스럽고 상호작용적인 방식으로 지도를 봅니다. 패키지_비행기_트랙 디렉터리.
AI 얼굴 감지(이전 버전): AI가 감지한 얼굴 자세를 기반으로 사람의 얼굴에 가상 안경을 착용합니다. 카탈로그 패키지_얼굴_감지. (이전 버전의 API가 더 이상 공식적으로 유지 관리되지 않아 삭제되었습니다.)
AR+AI: AI를 사용하여 이미지에서 개체를 감지하고 개체에 이름을 표시합니다. 디렉토리 package_image_classify. (애플릿은 메모리 부족으로 종료되는 경우가 많아 삭제됩니다.)
평면 추적
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/plane.html
얼굴 특징점 감지(새 버전)
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/face.html
텍스트 감지
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/ocr.html
이미지 추적
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/marker.html
단일 샘플 감지
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/osd.html
인체 핵심 포인트 감지
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/body.html
손 키포인트 및 제스처 감지
https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/visionkit/hand.html
RGBA 카메라 이미지 가져오기
https://developers.weixin.qq.com/miniprogram/dev/api/ai/visionkit/VKFrame.getCameraBuffer.html
첫 페이지
장난감 로봇이 방 바닥에 서 있습니다.
측정을 시작하려면 화면을 탭하세요. 커서 위치를 측정 대상의 양쪽 끝 부분에 맞춰주세요.
측정을 종료하려면 화면을 다시 탭하세요.
V1 버전 측정 결과가 정확하지 않습니다. 정확한 측정을 위해서는 V2 버전을 사용하시기 바랍니다.
사용자가 휴대폰을 들고 움직일 때 플레이어의 볼륨은 사용자의 거리에 따라 변경됩니다. 빨간색 비행기 뒤에서 플레이어의 소리가 사라집니다.
106개 특징점의 위치. 이 프로젝트에서는 인덱스 값이 78(왼쪽 눈)과 79(오른쪽 눈)인 두 개의 특징점을 사용합니다.
회전된 얼굴 감지
카메라 화면의 중국어, 영어, 숫자 등을 실시간으로 감지합니다.
식별 지도
장난감 로봇 보여주기
쇼박스
19가지 핵심 사항
코사인 거리를 사용하여 여덟 번째 방송 체조 세트의 움직임을 결정합니다.
스트레칭 운동
가슴 커지는 운동
측면 운동
21가지 핵심 사항
가위바위보 동작을 판단하기 위해 유클리드 거리를 사용합니다.
천 제스처
가위 제스처
돌 몸짓
지하철 노선도를 데스크탑에 고정하고 신문처럼 지도를 읽어보세요.
1. WeChat 개발자 도구를 사용하여 프로젝트 소스 코드를 열고 휴대폰에서 미리 봅니다.
2. 모델이 로드되지 않거나 이미지가 표시되지 않는 등의 상황이 발생하면 미니 프로그램의 디버깅 모드를 켜십시오.
소스 코드에서 상수 robotsUrl을 수정합니다.
// 机器人模型
const robotUrl = 'https://m.sanyue.red/demo/gltf/robot.glb' ;
