requestVideoFrameCallback() 简单实例

天行无忌 2023-03-28 原文

在文章《浏览器视频帧操作方法 requestVideoFrameCallback() 简介》中介绍了基本的使用情况，本文来体验一下其使用过程，后续将增加一些酷炫的实例。

点击开始播放视频、暂停视频以读取元数据。在画布上绘制视频帧与实际视频帧速率同步的画面。GITHUB中包含整个代码实例，主要代码如下：

<template>
    <div id="app">
        <div class="player-container">
            <div class="title">requestVideoFrameCallback() 简单实例</div>
            <div class="item-container left">
                <div class="item-container-in">
                    <video controls playsinline muted autoplay></video>
                    <div class="item-header">Video</div>
                </div>
            </div>
            <div class="item-container right">
                <div class="item-container-in">
                    <canvas></canvas>
                    <div class="item-header">Canvas</div>
                </div>
            </div>
            <div class="fps-info" v-if="fpsInfo">
                <strong>FPS：</strong>
                <i>{{ fpsInfo }}</i>
            </div>
            <div class="metadata-info" v-if="metadata">
                <textarea readonly v-model="metadata"></textarea>
            </div>
        </div>
    </div>
</template>

<script>
export default {
    name: "App",
    data() {
        return {
            fpsInfo: null,
            metadata: null,
        };
    },
    mounted() {
        this.init();
    },
    methods: {
        init() {
            const video = document.querySelector("video");
            const canvas = document.querySelector("canvas");
            const ctx = canvas.getContext("2d");

            video.addEventListener("play", () => {
                if (
                    !("requestVideoFrameCallback" in HTMLVideoElement.prototype)
                ) {
                    return alert(
                        "你的浏览器不支持接口 `Video.requestVideoFrameCallback()`"
                    );
                }
            });

            let width = canvas.width;
            let height = canvas.height;

            let paintCount = 0;
            let startTime = 0.0;

            const updateCanvas = (now, metadata) => {
                if (startTime === 0.0) {
                    startTime = now;
                }

                ctx.drawImage(video, 0, 0, width, height);

                const elapsed = (now - startTime) / 1000.0;
                const fps = (++paintCount / elapsed).toFixed(3);
                this.fpsInfo = !isFinite(fps) ? 0 : fps;
                this.metadata = JSON.stringify(metadata, null, 2);

                video.requestVideoFrameCallback(updateCanvas);
            };

            video.src = "https://vjs.zencdn.net/v/oceans.mp4";
            video.requestVideoFrameCallback(updateCanvas);
        },
    },
};
</script>

<style>
* {
    -webkit-box-sizing: border-box;
    box-sizing: border-box;
}
#app {
    font-family: Avenir, Helvetica, Arial, sans-serif;
    -webkit-font-smoothing: antialiased;
    -moz-osx-font-smoothing: grayscale;
    text-align: center;
    color: #2c3e50;
    background: #000;
}
.title {
    position: absolute;
    left: 0;
    top: 30;
    height: 60px;
    line-height: 60px;
    font-size: 24px;
    color: #fff;
    text-align: center;
    width: auto;
    right: 0px;
    background-color: #000;
    z-index: 100;
    border-bottom: 1px rgba(255, 255, 255, 0.6) solid;
}
.player-container {
    width: 100%;
    height: 100vh;
    overflow: hidden;
    position: relative;
}
.item-container {
    position: absolute;
    width: 50%;
    height: 100%;
    padding: 50px;
    top: 0px;
    z-index: 1;
}
.item-container.left {
    left: -5px;
    border-right: 1px rgba(255, 255, 255, 0.6) solid;
}
.item-container-in {
    width: 100%;
    height: 100%;
    position: relative;
}
.item-header {
    position: absolute;
    width: 100%;
    height: 100%;
    top: 100px;
    z-index: 9;
    color: rgba(255, 255, 255, 0.8);
    font-weight: 700;
}
.item-container.right {
    right: -5px;
    border-left: 1px rgba(255, 255, 255, 0.6) solid;
}
.item-container canvas,
.item-container video {
    position: absolute;
    left: 50%;
    top: 50%;
    margin: -180px 0px 0px -320px;
    width: 640px;
    height: 360px;
}
.item-container::before {
    position: absolute;
    content: "";
    width: 1px;
    height: 100%;
    overflow: hidden;
    background-color: rgba(#fff, 0.6);
}
.fps-info {
    position: absolute;
    width: 200px;
    height: 50px;
    line-height: 20px;
    font-family: Arial, Helvetica, sans-serif;
    left: 50px;
    bottom: 50px;
    z-index: 10;
    padding: 15px;
    background-color: rgba(255, 255, 255, 0.5);
    text-align: left;
    color: #000;
}
.fps-info i {
    font-style: normal;
}
.metadata-info {
    position: absolute;
    width: 600px;
    height: 180px;
    line-height: 20px;
    font-family: Arial, Helvetica, sans-serif;
    right: 50px;
    bottom: 50px;
    z-index: 10;
    padding: 15px;
    background-color: rgba(255, 255, 255, 0.5);
    text-align: left;
    color: #000;
}
.metadata-info textarea {
    display: block;
    width: 100%;
    height: 100%;
    background-color: transparent;
    border: none;
}
</style>

执行代码点击播放视频，右边的画面保持和视频画面同步。

利用方法 requestVideoFrameCallback() 可以在WEB中实现使用摄像头同步动作到3D任务模型中，需要用到AI来识别视频中的每一帧的骨骼工作，然后同步到虚拟3D模型中。这在虚拟直播中算是比较常见的场景。

requestVideoFrameCallback 简单 br section 播放视频 requestVideoFrameCal videoJavaScript 前端开发

有关requestVideoFrameCallback() 简单实例的更多相关文章

ruby-on-rails - 如何使用 instance_variable_set 正确设置实例变量？ - 2
我正在查看instance_variable_set的文档并看到给出的示例代码是这样做的:obj.instance_variable_set(:@instnc_var,"valuefortheinstancevariable")然后允许您在类的任何实例方法中以@instnc_var的形式访问该变量。我想知道为什么在@instnc_var之前需要一个冒号:。冒号有什么作用？最佳答案我的第一直觉是告诉你不要使用instance_variable_set除非你真的知道你用它做什么。它本质上是一种元编程工具或绕过实例变量可见性的黑客攻击
ruby 正则表达式 - 如何替换字符串中匹配项的第 n 个实例 - 2
在我的应用程序中，我需要能够找到所有数字子字符串，然后扫描每个子字符串，找到第一个匹配范围(例如5到15之间)的子字符串，并将该实例替换为另一个字符串“X”。我的测试字符串s="1foo100bar10gee1"我的初始模式是1个或多个数字的任何字符串，例如，re=Regexp.new(/\d+/)matches=s.scan(re)给出["1","100","10","1"]如果我想用“X”替换第N个匹配项，并且只替换第N个匹配项，我该怎么做？例如，如果我想替换第三个匹配项“10”(匹配项[2])，我不能只说s[matches[2]]="X"因为它做了两次替换“1fooX0barXg
ruby - 简单获取法拉第超时 - 2
有没有办法在这个简单的get方法中添加超时选项？我正在使用法拉第3.3。Faraday.get(url)四处寻找，我只能先发起连接后应用超时选项，然后应用超时选项。或者有什么简单的方法？这就是我现在正在做的:conn=Faraday.newresponse=conn.getdo|req|req.urlurlreq.options.timeout=2#2secondsend 最佳答案试试这个:conn=Faraday.newdo|conn|conn.options.timeout=20endresponse=conn.get(url
ruby-on-rails - Rails - 从另一个模型中创建一个模型的实例 - 2
我有一个正在构建的应用程序，我需要一个模型来创建另一个模型的实例。我希望每辆车都有4个轮胎。汽车模型classCar轮胎模型classTire但是，在make_tires内部有一个错误，如果我为Tire尝试它，则没有用于创建或新建的activerecord方法。当我检查轮胎时，它没有这些方法。我该如何补救？错误是这样的:未定义的方法'create'forActiveRecord::AttributeMethods::Serialization::Tire::Module我测试了两个环境:测试和开发，它们都因相同的错误而失败。最佳答案
ruby-on-rails - RSpec:避免使用允许接收的任何实例 - 2
我正在处理旧代码的一部分。beforedoallow_any_instance_of(SportRateManager).toreceive(:create).and_return(true)endRubocop错误如下:Avoidstubbingusing'allow_any_instance_of'我读到了RuboCop::RSpec:AnyInstance我试着像下面那样改变它。由此beforedoallow_any_instance_of(SportRateManager).toreceive(:create).and_return(true)end对此:let(:sport_
ruby - 用 Ruby 编写一个简单的网络服务器 - 2
我想在Ruby中创建一个用于开发目的的极其简单的Web服务器(不，不想使用现成的解决方案)。代码如下:#!/usr/bin/rubyrequire'socket'server=TCPServer.new('127.0.0.1',8080)whileconnection=server.acceptheaders=[]length=0whileline=connection.getsheaders想法是从命令行运行这个脚本，提供另一个脚本，它将在其标准输入上获取请求，并在其标准输出上返回完整的响应。到目前为止一切顺利，但事实证明这真的很脆弱，因为它在第二个请求上中断并出现错误:/usr/b
ruby-on-rails - 简单的 Ruby on Rails 问题——如何将评论附加到用户和文章？ - 2
我意识到这可能是一个非常基本的问题，但我现在已经花了几天时间回过头来解决这个问题，但出于某种原因，Google就是没有帮助我。(我认为部分问题在于我是一个初学者，我不知道该问什么......)我也看过O'Reilly的RubyCookbook和RailsAPI，但我仍然停留在这个问题上.我找到了一些关于多态关系的信息，但它似乎不是我需要的(尽管如果我错了请告诉我)。我正在尝试调整MichaelHartl'stutorial创建一个包含用户、文章和评论的博客应用程序(不使用脚手架)。我希望评论既属于用户又属于文章。我的主要问题是:我不知道如何将当前文章的ID放入评论Controller。
ruby-on-rails - 使用 ruby 将多个实例变量转换为散列的更好方法？ - 2
我收到格式为的回复#我需要将其转换为哈希值(针对活跃商家)。目前我正在遍历变量并执行此操作:response.instance_variables.eachdo|r|my_hash.merge!(r.to_s.delete("@").intern=>response.instance_eval(r.to_s.delete("@")))end这有效，它将生成{:first="charlie",:last=>"kelly"},但它似乎有点hacky和不稳定。有更好的方法吗？编辑:我刚刚意识到我可以使用instance_variable_get作为该等式的第二部分，但这仍然是主要问题。
ruby - 使用 Ruby 通过 Outlook 发送消息的最简单方法是什么？ - 2
我的工作要求我为某些测试自动生成电子邮件。我一直在四处寻找，但未能找到可以快速实现的合理解决方案。它需要在outlook而不是其他邮件服务器中，因为我们有一些奇怪的身份验证规则，我们需要保存草稿而不是仅仅发送邮件的选项。显然win32ole可以做到这一点，但我找不到任何相当简单的例子。最佳答案假设存储了Outlook凭据并且您设置为自动登录到Outlook，WIN32OLE可以很好地完成此操作:require'win32ole'outlook=WIN32OLE.new('Outlook.Application')message=
postman——集合——执行集合——测试脚本——pm对象简单示例02 - 2
//1.验证返回状态码是否是200pm.test("Statuscodeis200",function(){pm.response.to.have.status(200);});//2.验证返回body内是否含有某个值pm.test("Bodymatchesstring",function(){pm.expect(pm.response.text()).to.include("string_you_want_to_search");});//3.验证某个返回值是否是100pm.test("Yourtestname",function(){varjsonData=pm.response.json

requestVideoFrameCallback() 简单实例

有关requestVideoFrameCallback() 简单实例的更多相关文章

随机推荐