10路实时语音识别并同步生成字幕AI图像识别的教育录播一体机

派尼珂高清教学录播一体机

NK-HD306ERH

概述：

派尼珂Pnioke 10机位多接口组合输入高清视频会议教育录播主机，嵌入式Linux操作系统.内置AI先进算法，支持在线语音转写功能，实现将语音转写成文本并自动生成字幕功能。主机集成高清视频录制、直播、点播、智能导播等多功能于一体，面板自带5.6寸液晶显示屏。基于嵌入式硬件架构设计，产品高度稳定。设备采用H.264/H.265编码，支持10 路信号源 + 4 路 AI 图像识别区+1路导播预览画面+1 路录播画面，输入输出分辨率最大1920*1080P@60Fps，最大16画面显示，2路输出（直播+导播画面），2个RJ451000M网络接口。系统支持电影模式+资源模式并存的同步录制和直播，画面支持画中画、1/2/3/4/6/8/10分屏模式显示和录制。全双工操作，用户既能在本地接上鼠标、显示器和导播台进行导录播操作，也可以在PC上登录IE进行远程导播（支持多用户在线直播、点播功能，10路以上）。支持多方教学在线互动。录播主机可选配录播触控屏、导播键盘，让用户的操作更灵活、快捷。

应用场景：主要用于精品教学录播、培训室、视频会议、医学手术视频高清录制、演播室、户外直播及其他行业。

主要功能特点：

1、主机面板自带5.6 寸液晶显示屏,显示分辨率为 1920×1080P@60Hz

2、采用嵌入式纯硬件视频处理系统，嵌入式低功耗设计;

■时程序已固化至芯片内，即使异常断电，也不会造成系统无法启动;

■一体化集成设计: 显示及导播控制键盘、视频录制、网络直播、本地TS 串流、基于 AI 行为识别全自动导播、远程互动导播、实时语音识别并同步生成字幕。

3、共16个分割画面定义：

10路信号源画面+4路AI识别处理画面+1路导播监视画面+1路录播画面

3.1视频输入信号源可以是以下组合：

⑴共 6 路 HDMI输入, 每路支持 1920×1080P@60Hz(向下兼容)

⑵网络摄像机共10路，每路支持至1080P@60Hz，支持rtsp,rtcp,rtp,udp,rtmp协议等

⑶无线摄像机共4路

⑷视频文件，图片模式共10路: 支持jpg,png,bmp,gif图片作为输入源

⑸图片模式：共 10 路: 支持 jpg,png,bmp,gif 图片作为输入源；

⑹顶层叠加层：共02路: 支持jpg,png,bmp图片格式文件，仅用于Logo或字幕叠加显示

3.2.音频输入共8路:  6路为差分音频 + 2路立体音频输入，内置音频处理器功能

主机内置有语音识别引擎，可在录播时，可以同步生成字幕文件

3.3 AI行为识别通道：

信号源从10路信号源中，任意指定某一路信号源，作为AI行为识别功能使用;

教师区共1路

用于主讲(教师)区的行为识别:如走动,板书写字及手势识别的检测;

板书区共1路

功能与主讲(教师)区相同，用于特定空间的图像识别分析(如板书区域);

学生区共2路(双目定位) 

用于观众(学生)区的行为识别,如站立/坐下/举手/走动等行为检测;

4、视频输出

4.1、录播主机主画面共2路HDMI:当前正在录制或直播的画面，可用于外部接至观摩显示屏，同步显示出运行状态: 设备型号、序列号、软件版本、IP 地址、磁盘空间、运行时间，RAM 及 CPU 占有率，CPU 实时温度，当前时间等信息。

4.2、5.6 高清液晶显示屏, 可显示录播画面或者导播画面

5、音频：

输出共1组：与外部音频设备对接，如功放或调音台等设备本地监听共1组：用户可接入耳机进行本地监听。

6、画面模式：

①电影模式单个画面切换显示，只有一个视频源的画面;

⑵画中画由一个主画面(MAIN)和一个辅助画面(AUX)组成,小画面显示于右下角小块区域;

⑶分屏模式由一个主画面(MAIN)和一个辅助画面(AUX)组成,两个画面按左右相同大小显示;

整个画面背景可以自行定义(类型支持视频文件或图片);

④虚拟抠像合成模式颜色背景滤除   支持任意纯色背景抠像(蓝绿箱)，实时画面合成，边缘自动滤波处理; 

■支持分区模式:   单区/4区/6区,每个区独立配置抠像参数，减少对灯光环境的依赖;

⑤顶层叠加以上模式都支持最顶层的画面叠加，用于如台标，LOGO，比赛及字幕内容显示；

⑹用户自定义共3个通道供用户自定义,对视频源进行多画面的任意组合及拼接;

7、导播控制:

①手动导播由导播人员人工控制的一种导播模式;

主机集成导播按键功能:  画面模式,主通道和辅助通道选择，录播、直播、串流任务开始及停止，互动导播控制，云台机手动位置控制;

⑵自动导播：基于图像AI行为识别自动导播共4个独立的通道: 

■教师区; ■板书区; ■学生识别区;

每个通道上定义检测行为,并设定一组导播任务，在检测到有效目标后，将执行对应导播任务，包括画面切换及云台摄像机的位置控制等参数;

8、互动功能：

导播远程接入每页显示接入画面为4路，可以按页进行翻页显示;

互动答题共3个模式:    ■选择题答题;    ■语音答题;    ■手写板答题;

答题统计：在答题任务关闭的时候，实时统计出当前学员的答题数据，汇总后实时显示到画面中

9、视频录制：

录制与直播功能可同时启动，双工操作，采用独立的配置参数，工作时互不影响; 

本地硬盘: 默认配置 1T m2e的高速存贮硬盘，读写速度稳定至 950MB/s;支持

大硬盘容量扩展。 支持USB移动硬盘等存储介质存储。

网络磁盘: 用于局网内多台录播系统的集中存贮，集中管理的模式; 

视频编码： 支持 H.264/H.265/VP9/MJPEG 共 4 种模式，码流为 1-50Mbps; 

语音编码: 支持 AAC 编码，采样率为 96KHz，码流 320kbps; 

录制文件: 可定义为 MPG/MKV/MP4/QT/FLV/AVI 共 6 种格式; 

支持自动分段的循环录制模式(按时间或文件大小)

录像存储支持1920×1080P/60HZ录制。这次网络FTP下载存储上传、支持USB 拷贝。

10、控制接口

1个RS485、2个RS232，支持外接中控控制，向第三方中控平台，提供控制协议。

语音识别文字生成界面：

审核编辑 黄昊宇