我正在使用face-api库。 https://github.com/justadudewhohacks/face-api.js
当Face-api识别出的面部表情大于0.5且用户满意的表情大于0.6时，我试图从视频中获取照片。我发现了如何使用face-api获取该信息，但不知道如何在没有用户交互的情况下获取照片并将其放入某种img元素（图像的base64格式）。
这里是我到目前为止所拥有的代码示例：
<body>
<video id="video" width="720" height="560" autoplay muted></video>
<div id="screenshot">
<img src="" style="display: none">
<script>
const video = document.getElementById('video')
Promise.all([
faceapi.nets.tinyFaceDetector.loadFromUri('/face-api/models'),
faceapi.nets.faceLandmark68Net.loadFromUri('/face-api/models'),
faceapi.nets.faceRecognitionNet.loadFromUri('/face-api/models'),
faceapi.nets.faceExpressionNet.loadFromUri('/face-api/models')
]).then(startVideo)
function startVideo() {
navigator.getUserMedia(
{video: {}},
stream => video.srcObject = stream,
err => console.error(err)
)
}
video.addEventListener('play', () => {
const canvas = faceapi.createCanvasFromMedia(video)
document.body.append(canvas)
const displaySize = {width: video.width, height: video.height}
faceapi.matchDimensions(canvas, displaySize)
setInterval(async () => {
const detections = await faceapi.detectAllFaces(video, new faceapi.TinyFaceDetectorOptions()).withFaceLandmarks().withFaceExpressions()
const resizedDetections = faceapi.resizeResults(detections, displaySize)
canvas.getContext('2d').drawImage(video, 0, 0, video.videoWidth, video.videoHeight);
if (resizedDetections.length > 0 && resizedDetections[0].detection.score > 0.7 && resizedDetections[0].expressions.happy > 0.5) {
//HERE I NEED TO TAKE IMAGE FROM PHOTO
}
}, 100)
})
</script>
有人可以帮我做那部分吗？
您可以找到它的html版本here：
我找到了解决这个问题的方法。我认为有人会使用它或帮助他解决某些问题或完成项目：)如果有人使用它，我会很高兴。
以您要存储图像的形式添加ID为screenshot的div并添加此代码：
if (resizedDetections.length > 0 && resizedDetections[0].detection.score > 0.7 && resizedDetections[0].expressions.happy > 0.5) {
const canvas = document.createElement('canvas');
canvas.width = video.videoWidth;
canvas.height = video.videoHeight;
canvas.getContext('2d').drawImage(video, 0, 0);
const img = document.createElement("img");
img.src = canvas.toDataURL('image/webp');
document.getElementById('screenshot').appendChild(img)
}
这将在您的表单上添加图像，因此您可以将其用于将其发送到项目的服务器端部分。