我的NAS使用E5处理器，由于没有编解码硬件加速，在用jellyfin播放h265 10bit HDR时会进行实时转码，cpu占用1800%，功耗150W。
Tesla P4这张卡现在价格来到300块，8G的显存，接近1060的3D性能，可以达到多路4K@60的编解码性能，非常适合。
我的NAS系统安装Debian12 CasaOS，这里记录下配置过程。
一、首先安装必要的包
|
1 |
apt install linux-headers-amd64 gcc make libvulkan1 pkg-config |
二、初次运行驱动，会提示加载了开源驱动，问是否自动进行关闭，选yes，然后重启系统
|
1 |
./NVIDIA-Linux-x86_64-535.104.05-grid.run |
原创文章，转载请注明： 转载自贝壳博客
|
1 |
sudo apt install libtcmalloc-minimal4 |
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: 解决Debian 启动stable-diffusion-webui 提示 Cannot locate TCMalloc (improves CPU memory usage)
使用亮机卡进入bios，选择Advanced。
移动到PCI Subsystem Settings, 并回车进入。
移动到Above 4G Decoding ，改为[Enabled]。
按F10保存重启，换P100卡，滴一声，自检完成，进入系统。
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: 解决华南X99主板接Tesla P100不开机的问题
今天需要给3D打印机装一个监控，正好有个C920和orangepi zero2闲置。
usb插入设备
|
1 2 3 4 5 6 7 8 9 10 |
root@orangepizero2:~# v4l2-ctl --list-devices cedrus (platform:cedrus): /dev/video0 /dev/media0 HD Pro Webcam C920 (usb-5200000.usb-1): /dev/video1 /dev/video2 /dev/media1 |
可以看到已识别到设备，由于这款C920摄像头内集成264编码，因此通过v4l是可以直接从摄像头取264视频的，那么直接开始直播。
继续阅读原创文章，转载请注明： 转载自贝壳博客
本文链接地址: 罗技C920使用嵌入式设备直播
查找当前目录下所有flv文件，复制音视频，转换为mp4格式并修改后缀名
|
1 |
for f in *.flv; do ffmpeg -i $f -c copy ${f:0:0-4}.mp4; done |
查找当前目录下所有mp4文件，使用aac, x265重新编码，保存为mkv格式并修改后缀名
|
1 |
for f in *.mp4; do ffmpeg -i $f -c:a aac -c:v libx265 ${f:0:0-4}.mkv; done |
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: FFMpeg linux下批量处理命令行
SIMD全称Single Instruction Multiple Data，单指令多数据流，能够复制多个操作数，并把它们打包在大型寄存器的一组指令集。
以加法指令为例，单指令单数据（SISD）的CPU对加法指令译码后，执行部件先访问内存，取得第一个操作数；之后再一次访问内存，取得第二个操作数；随后才能进行求和运算。而在SIMD型的CPU中，指令译码后几个执行部件同时访问内存，一次性获得所有操作数进行运算。这个特点使SIMD特别适合于多媒体应用等数据密集型运算。
在微处理器中，单指令流多数据流技术则是一个控制器控制多个平行的处理微元，如X86中的SSE,AVX，Arm中的Beon，现在叫asimd。
在js运行环境中，目前还没有完美的线程方案来利用多核解码，那么我们可以优化至少让单核进行并行运算。这是chrome91和firefox89正式带来的WebAssembly SIMD技术。
NodePlayer.js 更新v0.10.1版，利用这项技术，在高分辨率解码环境下，带来比SISD性能提升1倍以上！尤其是在高分辨率，HEVC解码下。
测试对比：
首先准备一个hevc编码，2M码率，1080分辨率，30帧的视频
|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 |
ffprobe http://192.168.0.3:8000/live/enc1.flv ffprobe version 4.3.2 Copyright (c) 2007-2021 the FFmpeg developers built with Apple clang version 13.0.0 (clang-1300.0.29.30) configuration: --enable-small --disable-doc --enable-libsrt --enable-libfreetype --enable-libspeex --enable-libx264 --enable-libx265 --enable-openssl --enable-gpl --enable-nonfree --enable-version3 --enable-libopenh264 --cc='ccache cc' libavutil 56. 51.100 / 56. 51.100 libavcodec 58. 91.100 / 58. 91.100 libavformat 58. 45.100 / 58. 45.100 libavdevice 58. 10.100 / 58. 10.100 libavfilter 7. 85.100 / 7. 85.100 libswscale 5. 7.100 / 5. 7.100 libswresample 3. 7.100 / 3. 7.100 libpostproc 55. 7.100 / 55. 7.100 Input #0, flv, from 'http://192.168.0.3:8000/live/enc1.flv': Metadata: encoder : Lavf57.71.100 server : NMS v3.14.2 Duration: 00:00:00.00, start: 91.998000, bitrate: N/A Stream #0:0: Audio: aac, 48000 Hz, stereo, fltp, 128 kb/s Stream #0:1: Video: hevc, yuv420p(tv, bt709), 1920x1080, 2000 kb/s, 30.30 fps, 30 tbr, 1k tbn, 30 tbc |
可以看出，WASM版解码cpu占用90.6% ，而SIMD版解码cpu占用42.3%，达到1倍以上的性能提升！
wasm 版在线demo：http://demo.nodemedia.cn/uploads/nodeplayer_wasm.html
simd 版在线demo：http://demo.nodemedia.cn/uploads/simd/index.html
NodePlayer.js 文档：https://www.nodemedia.cn/doc/web/#/1?page_id=1
原文地址：NodePlayer.js正式支持SIMD解码加速 | 诺德美地流媒体系统 (nodemedia.cn)
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: NodePlayer.js正式支持SIMD解码加速
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: 浏览器如何判断是否支持SIMD
目前JETPACK SDK镜像是4.5.1版
Jetson Nano 4G 内存版，下载链接：https://developer.nvidia.com/jetson-nano-sd-card-image
Jetson Nano 2G内存版，下载链接：https://developer.nvidia.com/jetson-nano-2gb-sd-card-image
系统镜像6G，默认安装ubuntu desktop等桌面软件，体积非常大，如果项目开发完成，想要将工程文件直接集成到镜像里，进行批量烧录，那么可以通过自制镜像的方式来实现。以下针对Nano版整理的制作方法。
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: Jetson 把玩记 三、自制最小文件系统镜像
一款用于调试RTMP、KMP、HTTP-FLV流时间戳的小工具。
通过这个工具，可以直观的打印出每一帧音视频的信息，包括时间戳，包大小。
一个流畅的直播视频应该符合以下三个状态
一、每一帧数据匀速打印，无停顿。如果停止打印说明无数据返回，有两种情况：第一种是推流端网络阻塞，第二种是播放端网络阻塞。这个比较好判断，使用两台机器测试，如果停顿在同一个时间点，则是推流端阻塞；分别在不同的时间点停顿，则是播流端阻塞。还需要对服务端的上下行带宽进行评估是否已达上限。
二、音视频帧交替打印
以44100采样的aac举例，aac编码一个包需要1024个采样。这时，一帧的时长就是 1000/44100*1024 约等于23.219954648526077毫秒。
如果视频是30fps，则一帧的时长是1000/30 约等于33.3333毫秒。
这时候音视频一般会是AVAVAAV的排列。
如果出现连续上10个以上同类型包，则要考虑是否是编码器音视频编码不同步。
三、时间戳增长与时钟增长频率一致
RTMP，KMP、HTTP-FLV的时间基是1/1000秒，因此通过观察单位时间内时间戳的增长数应该与时钟一致。如果不一致，常见于从其它协议转RTMP时，时间单位换算错误。如RTSP: H264/90000 PCMA/8000
下载地址：https://github.com/illuspas/tsdebugger
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: TSDebugger一款直播流调试工具
NodeMediaClient-WinPlugin 用于Windows系统下，ie浏览器和360浏览器极速模式下的直播插件。最新的EDGE，Chrome，Firefox浏览器均移除了NPAPI插件的支持。只有国内部分浏览器如：360(安全、极速)浏览器，搜狗浏览器保留了NPAPI的支持。由于使用率较低，NodeMediaClient-WinPlugin曾一度停止开发。2020年12月flash停止支持并强制从windows系统下移除，导致不少项目无法正常使用。NodeMediaClient-WinPlugin在RTMP直播播放场景下完全可以替代flash，并且拥有更好的性能与播放体验。
本次更新重构了播放核心，使用了NodePlayer.js的延迟消除算法，延迟更低、体验更好。并且支持主流的Intel\Nvidia\AMD显卡硬件加速。4k60帧也流畅播放无压力。
ffmpeg -re -i bbb_sunflower_2160p_60fps_normal.mp4 -c copy -f flv rtmp://192.168.0.2/live/s
https://cdn.nodemedia.cn/NodeMediaClient-WinPlugin/0.5.0/NodeMediaClient_v0.5.0.msi
https://cdn.nodemedia.cn/NodeMediaClient-WinPlugin/0.2.9/NodeMediaClient_v0.2.9.0-trial.zip
https://down.360safe.com/cse/360cse_13.0.2206.0.exe
https://www.nodemedia.cn/doc/web/#/6?page_id=38
原创文章，转载请注明： 转载自贝壳博客
本文链接地址: 2021年IE可用直播插件，替代Flash