目录

离屏获取文本像素图并使用OpenGL绘制

问题现象

在音视频应用中,当需要在视频画面上叠加实时字幕,或在直播场景下实现高速滚动的弹幕时,使用OpenGL绘制文字能实现流畅低延时的渲染效果。在HarmonyOS中,如何获取文本像素数据并使用OpenGL绘制文字?

背景知识

解决方案

使用OpenGL绘制文本,首先需要获取绘制文本的像素数据,获得文本像素图数据后,OpenGL可以根据文本像素数据生成纹理对象,并将纹理对象渲染到指定的矩形方块上显示在屏幕上。在HarmonyOS中支持通过OffscreenCanvas以及Drawing模块离屏绘制文本内容并获取文本绘制的图像像素数据。

完整示例参考如下:

总结

使用OpenGL绘制文字的关键在于取得绘制文字内容的像素数据,获得文本的像素数据后,OpenGL生成纹理对象并在屏幕绘制。目前HarmonyOS支持通过上述三种方式取得文字绘制的像素数据,它们之间的对比如下表所示:

方案

对比

OffscreenCanvas组件

在ArkTS侧实现,实现逻辑简单,使用CPU绘制,需要两次数据拷贝。

CPU后端的离屏画布

在Native侧实现,使用CPU绘制,一次数据拷贝。

GPU后端的离屏画布

在Native侧实现,使用GPU绘制,一次数据拷贝。