官方介绍是:MediaPipe为实时和流媒体提供开源的跨平台、可定制的ML解决方案。实际上这个是一个机器学习主要是视觉算法的工具库,集成了人脸检测、人脸关键点、手势识别、头像分割、姿态识别等一大批模型,开箱可用。
模型虽不是效果最好的,但是优点是:1)可以支持各种平台和语言,包括IOS、Android、C++、Python/ target=_blank class=infotextkey>Python、JAVAScript、Coral等,另外就是速度快,基本上每个模型;2)速度很快,模型基本可以做到实时运行。
开源:https://Github.com/google/mediapipe
官网:https://mediapipe.dev/
一些模型的web体验地址(需要打开电脑摄像头):
人脸检测:https://code.mediapipe.dev/codepen/face_detection
人脸关键点:https://code.mediapipe.dev/codepen/face_mesh
手势识别:https://code.mediapipe.dev/codepen/hands
姿态识别:https://code.mediapipe.dev/codepen/pose
自拍头像分割:https://code.mediapipe.dev/codepen/selfie_segmentation