绘本生产制作与多渠道多端消费

简介: 互联网时代,儿童阅读市场日益渴求内容呈现形态的数字化、多元化,儿童读物原始的线 下实体出版生产模式,已不满足市场需求。市面上已有不少团队专门做数字化绘本生产,然而 投入成本巨大,我们通过实际的少儿绘本业务做切入口,进行了儿童阅读内容的跨媒介生产、 分发和消费的全链路探索。

作者| 阿里文娱开发工程师 归湖

互联网时代,儿童阅读市场日益渴求内容呈现形态的数字化、多元化,儿童读物原始的线 下实体出版生产模式,已不满足市场需求。市面上已有不少团队专门做数字化绘本生产,然而 投入成本巨大,我们通过实际的少儿绘本业务做切入口,进行了儿童阅读内容的跨媒介生产、 分发和消费的全链路探索。

一、绘本生产制作工具

绘本的高质量生产是绘本内容分发消费的前提。绘本的生产制作工具将绘本格式标准化, 将不同版权方提供的不同绘本素材进行加工处理,使其具有更加丰富的内容形式,融合图片、 音频、文字高亮、伴读等播放功能。

1. 绘本生产目标

绘本格式标准化:将不同版权方提供的不同格式绘本原素材进行格式标准化,能方便的对 绘本进行分发与消费。
高亮跟读绘本制作:带高亮跟读功能的绘本更符合儿童的阅读模式,能让其阅读时更加专注。如何快速的为图片以及音频中的每个文字添加准确的时间戳,是该功能的一大挑战。
一次制作多端使用:实现一次制作多端适配,即绘本制作一次,能够同时满足小屏端和大 屏端的要求,减少绘本制作成本。
绘本预览工具以提升制作质量及效率:绘本上线之前需要对绘本质量进行严格把关,制作出来的绘本质量是否符合标准,是否可播,需要提供预览工具以及自动化的校验手段来把控。

2. 绘本生产具体方案

1)绘本格式标准化方案 绘本本身提供的功能和其实现方式,目前业界并没有标准的定义,基本按照自己的提供的
内容和能力的私有协议定义,各不相同,因此各个版权方提供的绘本原始素材不同。少儿绘本
生产需要兼容不同的素材,并且制定标准的绘本格式,提高运营标准化制作能力,以提高绘本分发消费的效率。因此,对绘本的格式提出了以下几个要求:

image.png

图 1-1 绘本格式标准化

a)标准化:不将业务逻辑掺杂进格式的定义,功能点都能够通用化,对于具体的实现方案没有强;
b)协议扩展性:新功能的增加,尽可能“新增描述”,不用动基础的定义结构,从而去保证兼容性,协议的定义要尽可能把未来可能的扩展形式考虑进去;
c)向前向后兼容性:向前兼容——按低版本实现的绘本播放器,打开高版本格式的绘本时,能够最大程度的展现低版本已实现的功能,忽略高版本中新增的功能。向后兼容——按高版本 格式实现的绘本播放器,能够打开低版本的绘本,并且 100%保留低版本已定义的功能;
d)适配性:制作出的绘本如何适配各种不同类型、分辨率的手机; e)性能与实现成本:有一些技术手段可以帮助缩小资源大小、缩小资源加载速度、内存占用等,但会增加实现成本。设计时尽可能保留后续优化的可能性和兼容性。
2)高亮跟读智能化解决方案
目前市面上的电子绘本大多数都是 PDF 或者图片的形式,只能以电子书的方式进行阅读, 不支持高亮跟读的阅读模式。绘本生产制作工具期望通过一种方案,将电子绘本的原始物料加工成可支持高亮跟读阅读模式的电子绘本,使绘本内容更加丰富,并且带高亮跟读功能更能符 合儿童的阅读模式。
绘本原始素材只要分为两种,图片(PDF)或图片(PDF)+音频的格式。 对于只有图片或者 PDF 的绘本,首先需要将图片中的文本,合成音频文件。借助达摩院的语音合成 TTS 技术,通过先进的深度学习技术,将文本转换成自然流畅的语音。它提供了不同
的语音模型可供选择,并提供调节语调、语速和音量等功能,合成指定格式(mp3 或 wav)的音频文件。

image.png

制作高亮跟读绘本最重要的是得到音频中每个文字精确的时间戳,这边借助达摩院提供的 实时语音识别技术,将中文或英文的音频转成文字以及获得每个文字的时间戳。由于达摩院对 语音的操作只支持 8K 和 16K 采样频率的音频,版权方提供的绘本音频大多都是 44.1K 采样率 的音频,因此在转换之前需要做一次音频重采样,转换音频的采样率。获取音频中文字的时间 戳具体流程如下:

image.png

3)一次制作多端适配解决方案
绘本优先投放在小小优酷独客,再在优酷主客、PAD 以及 OTT 端进行分发,不同分辨率的 端对绘本图片的分辨率要求不同,为平衡性能及体验以及降低制作成本,绘本生产期望一次生 产,多端使用。适合小屏端的绘本在大屏端会出现图片模糊的情况,但是适合大屏端的绘本会 使得绘本 zip 包过大,影响小屏端绘本的下载速度和用户的阅读体验,需要去平衡这个问题。
基于上述考虑,在制作绘本的时候,优先制作高分辨率的绘本,然后等比例缩放图片、字 体、文本框等参数,后台自动生成低分辨率绘本,在不同端下发对应的绘本,这样便可以一次 制作,多端使用,减少人工制作成本,提高绘本制作效率。
4)绘本预览工具以及自动化校验方案 绘本的质量直接影响用户对绘本的阅读体验。绘本制作完成之后,需要对绘本的质量进行校验才能上线,因此,绘本生产工具中提供的预览功能,将绘本播放器封装成 SDK,提供对绘
本的下载、解压以及播放的功能,与绘本真实播放场景一致。除此之外,绘本生产工具中通过 定时任务,增量的对新制作的绘本进行质量校验,主要对绘本 zip 包大小和图片大小的校验, 对于质量不达标的绘本进行卡点,需要重新制作或修改。

image.png

二、绘本多渠道多端分发消费

绘本期望在多渠道多端进行分发消费,依赖于绘本播放 SDK 的开发。基于插件模式设计的 独立 SDK,扩展性强,轻量级接入,并在多渠道、多端(小小优酷独客、优酷主客、主客 PAD、 OTT)分发和消费绘本。

1.绘本播放 SDK 目标

1)技术目标
a)性能:首次加载绘本速度,绘本播放过程中操作的 FPS;
b)对外接口:简洁、单一职责;
c)界面适配性:界面需考虑适配性,同时支持 iPhone 和 iPad;
d)功能适配性:针对绘本当前格式,交互的形式进行挖掘;
e)扩展性:扩展的易用性,插件的配置。
2)业务目标
a)绘本功能可以独立接入各业务方;
b)绘本 SDK 支持不同程度的接入定制;
c)制作带有绘本播放功能的 app,结合绘本生产工具打造开放绘本创作平台。

2.绘本 SDK 的架构分层设计思想

image.png

1)核心播放层:用于绘本播放器的 UI 展示、音频播放、用户交互等最核心的内容。核心 播放层可独立编译运行,不带任何 UI 控制。
2)绘本插件层:有多个 Manager,用于统一协调各插件的配置、通信、排版,层级等。这 一层用工厂方法进行管理,绘本开发人员可以在工厂中增加新的 Manager 用于扩展绘本的功能。 作为一个绘本 SDK 的 Plugin 层提供。
PluginManger 用于管理插件,通过继承插件基类 YKPBPlugin,实现伴读 Plugin、预览 Plugin 和设置 Plugin、导航栏 Plugin 等。业务方也通过同样的方式去制作 Plugin。同时,PluginManger 通过读取本地配置文件(Plist)来使能或者禁用某种插件,达到云控插件的效果。
LayerManager 通过读取本地的配置文件(Plist)来配置插件的层级。
3)绘本独立模块层:包括下载模块、Playlog 模块、数据库模块。
4)绘本业务层:包括推荐页、详情页、丛书页。
5)绘本 API:暴露一系列状态回调,状态控制,插件扩展接口等。

三、总结

绘本的生产决定了绘本的功能以及绘本的质量,如何提升绘本的质量、提高绘本的制作效 率、丰富绘本的功能是绘本生产的后续目标。在高亮跟读功能的制作中,人工校验时间戳的成 本较高,减少人工校验成本或者自动校验将会大幅度提高绘本的制作效率。绘本的消费以及分 发效率影响着用户的体验,现在的绘本播放是在绘本下载完才开始播放,支持秒开能力的边下 边播是下后续绘本播放优化的方向,并且在绘本播放的时候支持互动能力也会是另一个重要方 向。

相关文章
|
弹性计算 安全 容灾
【深度好文】为什么说用好VPC很重要!
本文详细探讨了阿里云VPC(Virtual Private Cloud)的使用方法及其重要性。 VPC作为用户云上的“数据中心”,提供了安全隔离的网络环境,帮助用户构建和管理云服务。文章首先对比了经典网络和VPC的区别,强调了VPC在安全性、灵活性和扩展性方面的优势。接着,通过具体的规划步骤,包括选择地域、账号规划、网段规划、安全隔离设计等,展示了如何有效利用VPC。此外,还介绍了VPC连接互联网的方式及安全措施,以及VPC与IDC互访的解决方案。 总体而言,VPC不仅是用户上云的第一步,更是构建稳定、高效云基础设施的关键。
|
10月前
|
域名解析 弹性计算 安全
2026年阿里云服务器使用全教程:从配置选型到 WordPress 网站搭建
阿里云服务器(含 ECS 与轻量应用服务器)的使用需遵循 “选型 - 环境配置 - 应用部署 - 上线验证” 的核心流程,不同用户可根据技术基础与业务需求选择适配方案。本文以搭建 WordPress 博客为例,结合官方标准操作与实操细节,详解从服务器配置选择到网站上线的完整步骤,同时补充轻量与 ECS 的差异及远程连接、安全配置等关键要点,帮助用户高效上手。
|
人工智能 自然语言处理 语音技术
Ultravox:端到端多模态大模型,能直接理解文本和语音内容,无需依赖语音识别
Ultravox是一款端到端的多模态大模型,能够直接理解文本和人类语音,无需依赖单独的语音识别阶段。该模型通过多模态投影器技术将音频数据转换为高维空间表示,显著提高了处理速度和响应时间。Ultravox具备实时语音理解、多模态交互、低成本部署等主要功能,适用于智能客服、虚拟助手、语言学习等多个应用场景。
1194 14
Ultravox:端到端多模态大模型,能直接理解文本和语音内容,无需依赖语音识别
|
存储 人工智能 安全
一文了解:阿里云对象存储OSS是什么?
阿里云对象存储OSS是一款海量、安全、低成本、高可靠的云存储服务,数据持久性达99.9999999999%,适用于互联网音视频、教育、AI/物联网、影视渲染及基因等行业。OSS提供标准、低频、归档等多种存储类型,支持按量付费与资源包两种计费模式,公网出流量收费,内网流量免费。
13655 7
|
程序员 开发工具 git
腾讯自研Git客户端,助力每个人都可以轻松使用Git
腾讯自研Git客户端,助力每个人都可以轻松使用Git
815 0
|
SQL 弹性计算 数据库
达梦(DM)1、安装达梦数据库(Windows篇)
DM8是达梦公司在总结DM系列产品研发与应用经验的基础上,坚持开放创新、简洁实用的理念,历经五年匠心打磨,推出的新一代自研数据库。
2685 0
达梦(DM)1、安装达梦数据库(Windows篇)
|
Web App开发 JavaScript 前端开发
Node.js介绍 , 安装与使用
【7月更文挑战第6天】Node.js介绍 , 安装与使用
728 5
|
运维 Linux 网络安全
跨平台SSH文件传输:Linux与Windows环境下的实践指南
本文介绍了在Linux和Windows之间使用SCP、SecureCRT及PuTTY工具集进行文件传输的方法。在Linux中,利用SCP命令进行文件下载、上传及目录传输。在Windows环境下,PSFTP和PSCP提供类似功能,而SecureCRT作为SSH客户端,支持设置上传下载目录并进行文件传输。掌握这些工具的使用可提升跨平台运维效率。