基于瑞芯微RK3588芯片的内窥镜、远程会诊等医学影像解决方案

为了高度还原病灶和方便快速诊断，医学影像对画质要求很高，既要还原真实的画面，也要对画面进行特殊处理，方便诊断。RK3588作为当下的AIoT旗舰SoC，支持9000万像素处理，支持8K视频编码，自带48M ISP和6TOPS NPU，在图像编解码和图像处理方面表现优秀。结合ScenSmart以往的项目经验，下面简单介绍下RK3588芯片在医学影像领域的应用方向。

医用内窥镜

医用内窥镜是医疗影像的主要方向之一，内窥镜主要用来观察人体内的病灶，方便医生诊断。对于内窥镜产品，画面高度还原、高清晰度是刚需。RK3588自带两个24M的ISP，支持8K视频编码，性能远超目前市面上的4K编码产品。RK3588支持6个sensor直连，原始图像进入ISP后进行后期处理。与瑞芯微以往的ISP不同，RK3588采用新一台的ISP设计，并且向客户开放，客户可以根据自己的需求进行算法调整。除了传统的ISP外，RK3588还自带三核NPU处理器，可提供高达6TOPS的算力支持，算法公司可充分利用自己的技术优势打造壁垒，让产品更具竞争力。除了sensor直连，RK3588还支持USB3.0、PCIE3.0和千兆以太网等高速接口，支持丰富的图像传输方案。

除了传统有线内窥镜，无线胶囊内镜也越来越普及。RK3588拥有丰富的拓展接口，可支持PCIE、USB、SDIO接口的WiFi模组。通过自身模组搭载局域网，支持多设备联通，可与无线胶囊内镜绑定网络。支持2.4G和5.8G双频WiFi，支持WiFi6高速传输，可根据场景需求选择合适的传输协议，可支持高清画面实时传输，多重加密，安全便利。

远程会诊

远程会诊场景中，主要是使用影音传输和多媒体显示的功能。RK3588自带8K的硬件编码器和硬件解码器，在影音编解码方面具有强大的性能优势。8K视频的四千万像素基本也是人类肉眼所能识别的最高分辨率，换句话说，采用8K的点对点显示的画面跟人眼观察到的清晰度是一样的。通过8K的编解码技术，真正缩短了距离，方面医学影像的远程使用。此外RK3588支持多路视频拼接，可将6路sensor的图像画面拼接，输出物全景画面。RK3588支持67M的静态图像编码，可实现从96×96 到 8192×8192分辨率的静态图像编码，最高可处理9000万像素点。RK3588还支持多路视频输出，可支持多路画面异步显示，支持8K+4K+2K的3屏异显，4K+4K+4K+2K的四屏异显，可满足多个屏幕显示的需求。

RK3588在声音方面也有丰富的接口设计，支持4个IIS数字音频接口，其中包含2个两通道接口和两个八通道接口，可以满足复杂的音频功能需求。结合NPU的强大算力，可支持8麦、12麦等高性能的阵列麦算法。AI语音算法，具有高度的灵活性，和强大的运算能力，采用AI算法处理的阵列麦拾音效果要远超传统DSP封装的算法。目前AI语音算法已经逐渐取代传统降噪算法，成为主流。

AR显示增强技术，医疗诊断和培训

RK3588具有强大的视频输出能力，支持双目4K@120fps的高刷屏，可搭建具有顶级性能的AR头盔一体机。RK3588自带的48M ISP，可外接高清摄像头，快速获取佩戴者当前视野，通过NPU算法给出合适的建议，再将其显示到屏幕上，方便佩戴者快速获取专业的信息。除了在诊断场景的应用，也可以用于医疗培训的场景。医疗培训场景中多用AR和MR技术，借助KR3588丰富的传感器接口和强大的算力，无论是实时画面的拾取还是对特定物体的渲染、混合显示，RK3588都可满足需求。并且RK3588是一款基于ARM架构的SoC，采用8nm制程工艺，在能耗方面表现优秀，续航能力强，热量低，这也是佩戴设备所需要的。

核心板加底板，可大幅缩短研发周期

为方便客户落地项目，缩短产品的研发周期，ScenSmart推出了基于RK3588芯片方案的全功能核心板SC900。SC900采用440PIN高速连接器，已将RK3588的全部功能针脚引出，避免复用，可满足RK3588的全功能接口开发需求。RK3588作为一款面向AIoT行业的旗舰产品，具有丰富的接口拓展能力，根据ScenSmart平台的医疗项目经验来看，RK3588完全可以满足当下的功能需求。

对于有一定硬件研发能力的行业客户来说，采用RK3588核心板加底板的产品形态不但可以快速打造系列产品，也有助于保证产品的差异化。通过ScenSmart提供的SC900核心板，已经可以保证基本系统的运行，行业客户只需要在接口方面做差异化的产品定义。毕竟需求源于客户，只有自己客户才知道最符合业务需求的产品是怎样的，源于客户需求的逆向生产才是最具粘性的产品。

支持Linux和国产操作系统

RK3588可支持丰富的操作系统，采用Linux 5.10内核，支持安卓、Linux、Linux发行版和国产操作系统。在医疗领域，我们推荐Linux发行版系统和国产操作系统。基于Linux的发行版系统，如Debian、Ubuntu等，功能相对完善，开源策略，非常适合二次开发，并且会有团队长期维护，有助于产品的稳定。目前国产系统也都是基于Linux的二次开发，如UOS、deepin、麒麟系统等。鸿蒙OS实际也是基于Linux开发，不过鸿蒙系统的动作比较大，采用了Linux内核，其余大都是自己的组件。目前KR3588平台的UOS、麒麟等已经完成适配，鸿蒙OS的配置还在进行中。从长远考虑，如果是面向国内市场的产品，鸿蒙OS将会是优选；如果是面向国外市场的产品、Debian是一个比较好的选择。

结语

RK3588的强大编解码能力和丰富视频输入输出接口刚好满足了医学影像的场景需求，尤其是瑞芯微开放ISP后，客户在算法方面拥有了更大的自主性，画面质量的调整空间更大，再加上高算力的NPU支持，在边缘AI方面有很大的发挥空间。目前基于RK3588芯片的产品已经上市，且SDK相对成熟，可快速落地产品。目前医学影像的产品大都停留在4K阶段，8K产品将是一个重要的升级。当下，是8K的编码、传输、解码技术都已成熟，势必迎来爆发式增长。