使用face-api.js在浏览器中实现多目标人脸识别与Svelte集成


使用face-api.js在浏览器中实现多目标人脸识别与Svelte集成

本教程旨在解决使用face-api.js在svelte项目中进行人脸识别时,多个人脸被错误识别为同一人的问题。文章将深入探讨`labeledfacedescriptors`和`facematcher`的正确构建方法,确保每个已知人脸都能被准确识别。通过详细的代码示例和专业指导,读者将学会如何加载模型、初始化摄像头、实时检测并匹配多个人脸,并最终在canvas上绘制识别结果,从而构建一个健壮且高效的浏览器端人脸识别系统。

浏览器端人脸识别:使用face-api.js与Svelte实现多目标精确识别

在现代Web应用中集|成人|脸识别功能,face-api.js是一个强大且易于使用的J*aScript库。结合Svelte框架,我们可以构建高性能、响应式的用户界面。然而,在实现多目标人脸识别时,开发者常会遇到一个常见问题:系统能够检测到多个人脸,但会将所有检测到的人脸错误地识别为同一个已知个体。本教程将深入分析这一问题的原因,并提供一个完善的解决方案,指导您如何正确地构建和使用face-api.js,以实现对多个已知人脸的精确识别。

1. 环境准备与模型加载

首先,确保您的Svelte项目中已安装face-api.js。您可以通过npm或yarn进行安装:

npm install face-api.js
# 或 yarn add face-api.js

在Svelte组件中,我们需要导入必要的模块,并定义模型加载的URL。为了在浏览器中运行,通常会从CDN或本地服务器加载模型权重文件。

<script>
  import * as faceapi from 'face-api.js';
  import { onMount, onDestroy } from 'svelte';
  // 假设 $customers 和 $baseURL 是Svelte store,用于管理客户数据和基础URL
  import { customers, baseURL } from './stores'; 

  let video;
  let detections = [];
  let width = 640; // 调整视频和画布宽度
  let height = 480; // 调整视频和画布高度
  let canvas, ctx;
  let container;
  let faceMatcher; // 声明 faceMatcher 变量

  const detectionOptions = {
    withLandmarks: true,
    withDescriptors: true,
    minConfidence: 0.5,
    // 模型URL,建议使用稳定可靠的CDN或自行托管
    MODEL_URLS: {
      Mobilenetv1Model: "https://raw.githubusercontent.com/ml5js/ml5-data-and-models/main/models/faceapi/ssd_mobilenetv1_model-weights_manifest.json",
      FaceLandmarkModel: "https://raw.githubusercontent.com/ml5js/ml5-data-and-models/main/models/faceapi/face_landmark_68_model-weights_manifest.json",
      FaceRecognitionModel: "https://raw.githubusercontent.com/ml5js/ml5-data-and-models/main/models/faceapi/face_recognition_model-weights_manifest.json",
    },
  };

  // 组件销毁时清理资源
  onDestroy(() => {
    if (video) {
      video.pause();
      if (video.srcObject) {
        video.srcObject.getTracks().forEach(track => track.stop());
      }
      video.remove();
    }
    if (canvas) {
      canvas.remove();
    }
  });

  // 组件挂载时初始化
  onMount(() => {
    initializeFaceRecognition();
  });

  export let view_sales_function; // 假设这是一个外部传入的函数
</script>

<div bind:this={container} class="container z-0 rounded-2xl" />

2. 获取视频流与创建画布

为了进行实时人脸识别,我们需要从用户的摄像头获取视频流,并创建一个Canvas元素用于绘制视频帧和识别结果。

  // 辅助函数:获取视频流
  async function getVideo() {
    const videoElement = document.createElement("video");
    videoElement.setAttribute("style", "display: none;"); // 隐藏视频元素,只在canvas上显示
    videoElement.width = width;
    videoElement.height = height;
    container.appendChild(videoElement);

    const capture = await n*igator.mediaDevices.getUserMedia({ video: true });
    videoElement.srcObject = capture;
    videoElement.play();

    return videoElement;
  }

  // 辅助函数:创建Canvas
  function createCanvas(w, h) {
    const canvasElement = document.createElement("canvas");
    canvasElement.setAttribute("style", "border-radius: 1rem");
    canvasElement.width = w;
    canvasElement.height = h;
    container.appendChild(canvasElement);
    return canvasElement;
  }

3. 核心挑战:正确构建 LabeledFaceDescriptors

多目标人脸识别问题的根源在于faceapi.LabeledFaceDescriptors的构建方式。原始代码将所有客户的人脸描述符(descriptors)添加到一个共享的数组中,然后为每个客户都使用这个共享数组创建一个LabeledFaceDescriptors对象,导致所有客户最终都指向了同一个描述符集合,从而使FaceMatcher无法区分不同的人。

SONIFY.io SONIFY.io

设计和开发音频优先的产品和数据驱动的解决方案

SONIFY.io 75 查看详情 SONIFY.io

正确的做法是:为每个客户创建一个独立的LabeledFaceDescriptors对象,其中包含该客户自己的名称和其人脸描述符数组。

  // 核心函数:获取带标签的人脸描述符集合
  async function getLabeledFaceDescriptors() {
    console.log("Loading labeled face descriptors...");
    const labeledDescriptors = await Promise.all(
      $customers.map(async (customer) => {
        if (!customer.image_url) {
          console.warn(`Customer ${customer.name} has no image_url, skipping.`);
          return null;
        }

        const descriptors = [];
        try {
          // 从客户图片URL获取图片
          const img = await faceapi.fetchImage($baseURL + customer.image_url);
          // 检测图片中的单个人脸并提取其描述符
          const faceDetection = await faceapi
            .detectSingleFace(img)
            .withFaceLandmarks()
            .withFaceDescriptor();

          if (faceDetection && faceDetection.descriptor) {
            descriptors.push(faceDetection.descriptor);
            console.log(`Successfully processed image for ${customer.name}`);
          } else {
            console.warn(`No face detected in image for ${customer.name} or descriptor missing.`);
          }
        } catch (error) {
          console.error(`Error processing image for ${customer.name}:`, error);
        }

        if (descriptors.length > 0) {
          // 为当前客户创建一个 LabeledFaceDescriptors 对象
          // 包含客户姓名和其对应的人脸描述符数组
          return new faceapi.LabeledFaceDescriptors(customer.name, descriptors);
        } else {
          return null; // 如果没有获取到描述符,则返回 null
        }
      })
    );

    // 过滤掉未能成功获取描述符的客户
    return labeledDescriptors.filter(d => d !== null);
  }

4. 初始化模型与人脸匹配器

在模型加载完成后,我们需要调用getLabeledFaceDescriptors来准备已知人脸数据,并使用这些数据初始化faceapi.FaceMatcher。FaceMatcher将用于在实时视频流中识别人脸。

  // 初始化函数
  async function initializeFaceRecognition() {
    video = await getVideo();
    canvas = createCanvas(width, height);
    ctx = canvas.getContext("2d");

    // 并行加载所有必要的模型
    await Promise.all([
      faceapi.nets.ssdMobilenetv1.loadFromUri(detectionOptions.MODEL_URLS.Mobilenetv1Model),
      faceapi.nets.faceRecognitionNet.loadFromUri(detectionOptions.MODEL_URLS.FaceRecognitionModel),
      faceapi.nets.faceLandmark68Net.loadFromUri(detectionOptions.MODEL_URLS.FaceLandmarkModel),
    ]);
    console.log("Face-API.js models loaded.");

    // 获取并过滤出有效的带标签人脸描述符
    const labeledFaceDescriptors = await getLabeledFaceDescriptors();
    if (labeledFaceDescriptors.length === 0) {
      console.warn("No valid labeled face descriptors found. Recognition will only identify 'Unknown'.");
    }

    // 初始化人脸匹配器,设置匹配距离阈值(0.6是常用值,可根据需求调整)
    faceMatcher = new faceapi.FaceMatcher(labeledFaceDescriptors, 0.6);
    console.log("FaceMatcher initialized.");

    // 开始实时检测
    startDetectionLoop();
  }

5. 实时人脸检测与识别循环

通过setInterval函数,我们可以周期性地从视频流中检测所有人脸,并使用faceMatcher进行匹配。

  // 启动检测循环
  function startDetectionLoop() {
    const displaySize = { width: video.width, height: video.height };

    setInterval(async () => {
      // 检测视频流中的所有人脸,并提取地标和描述符
      detections = await faceapi
        .detectAllFaces(video)
        .withFaceLandmarks()
        .withFaceDescriptors();

      // 将检测结果按显示尺寸进行调整
      detections = faceapi.resizeResults(detections, displaySize);

      // 对每个检测到的人脸,使用 faceMatcher 找到最佳匹配
      const results = detections.

以上就是使用face-api.js在浏览器中实现多目标人脸识别与Svelte集成的详细内容,更多请关注其它相关文章!


# 靖江网站建设私人定做  # 创建一个  # 检测到  # 我们可以  # 器中  # 表单  # 中集  # 武隆区网站推广公司  # 西安网站推广威星hfqjwl作词  # 递归  # 服务seo策略  # 太阳宫网络营销推广方案  # 提高关键词的排名  # 智能营销推广信息中心招聘  # 大流量网站优化软件下载  # 武强营销型网站建设费用  # 朔州seo优化推广软件  # javascript  # 加载  # 多个  # 的人  #   # 人脸识别  # cdn  # ai  # app  # 浏览器  # npm  # github  # json  # git  # js  # java 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: AngularJS动态内容中DOM元素查找的时序问题及$timeout解决方案  路由器DNS怎么设置最快 优化DNS提升上网速度教程  《美篇》取消会员自动续费方法  C++如何实现矩阵乘法_C++二维数组矩阵运算代码示例  Firefox OS应用开发:解决XMLHttpRequest跨域请求阻塞问题  解决CSS布局中意外顶部空白问题的教程  怎样让Windows 11的开始菜单恢复经典样式_Open-Shell工具使用指南【怀旧】  PHP使用DOMDocument与XPath精准追加XML元素教程  盲鳗善于分泌黏液猜猜主要用来做什么  Safari浏览器自动填表功能失效怎么办 Safari表单管理修复  Golang如何初始化module项目_Golang module init使用说明  键盘保修需要什么_键盘售后维修流程  《兴业银行》注册登录方法  快递查询,一键速查  Leaflet地图弹出窗口图片动态显示:避免缺失图标的专业指南  Symfony路由参数转换器:实体存在性验证与错误处理策略  嘀嗒顺风车如何开具电子发票  c++如何掌握指针的核心用法_c++指针入门到精通指南  c++如何实现观察者设计模式_c++行为型设计模式实战  《撕歌》会员开通方法  如何使用CSS Grid实现“大方块左侧,小方块右侧垂直堆叠”的水平布局  海外搜索引擎推广效果怎么样,怎么分析效果!  Excel宏怎么删除_Excel中删除宏的详细操作流程  《火影忍者:木叶高手》快速升级攻略  六级准考证号怎么查_四六级准考证查询入口官网  《我的恋爱逃生攻略》中文名字输入方法  如何在Python中安全地将环境变量转换为整数并满足Mypy类型检查  快递优选如何查优选物流_快递优选专属物流渠道查询与配送时效  Python中安全地将环境变量转换为整数的类型注解指南  淘口令快速解析技巧  如何在mysql中使用索引提示_mysql索引提示优化方法  宝妈做视频号该写什么标签话题?宝妈关注的话题有哪些?  《广发易淘金》国债逆回购操作教程  wps文字怎么设置文字环绕图片的方式_wps文字如何设置文字环绕图片方式  钉钉任务无法提醒如何处理 钉钉任务提醒优化方法  Lar*el 中高效执行多列更新:单次查询实现  Excel如何设置动态下拉菜单_Excel表格下拉选项快速方法  谷歌浏览器官方镜像获取方法_谷歌浏览器网页版入口极速直达  iPhone14无法连接蓝牙设备如何解决  Go语言中方法与接收器:指针和值类型的调用机制详解  如何在CSS中使用伪类选择器_hover实现悬停效果  4399造梦西游3无敌版_4399游戏入口  Win10关闭UAC用户账户控制的方法 Win10降低安全提示等级【技巧】  网易云音乐闹钟铃声设置教程  我居然低估了 DeepSeek,这次更新它做到了这些!  解决jQuery多计算器输入字段冲突的教程  秋风萧瑟洪波涌起中的萧瑟指的是什么  谷歌浏览器怎么把网页翻译成中文_Chrome网页翻译功能使用方法  《U校园》学生登录入口2025  PHP多语言网站的实现:会话管理与翻译函数优化教程 

 2025-10-20

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.