DCP Inside : Digital Cinema Package

Les sous-titres peuvent être intégrés selon deux méthodes, soit via du texte soit via des images :

Au commencent, avec Interop, les fichiers de sous-titres étaient de simples fichiers XML déposés dans un sous-répertoire à l'intérieur des DCP. Leurs syntaxes respectaient le DCSubtitle, la norme Subtitle Specification for Projection Technology DLP Cinema, écrite par Texas Instruments. Ces sous-titres Interop sont reconnaissables car ils utilisent le tag <DCSubtitle>. Vous avez un exemple de sous-titres Interop ici. Etant donné qu'ils sont depuis considérés comme obsolète, sauf exception, nous n'en parlerons plus dans ce chapitre.

Les sous-titres doivent respecter la norme SMPTE 428-7-2014 - Subtitle, la syntaxe XML est différente (même si proche de sa précédente Interop en reprenant certains éléments).

Mais le plus grand changement est le passage à un format MXF : le fichier XML a été intégré à l'intérieur d'un MXF propre, comme pourrait l'être les pistes images ou les pistes sonores. Les autres assets (PNG, Font) sont également intégrés dans le même MXF de sous-titres.

Les métadonnées

Nous pourrions rajouter le KLV Descriptive Metadata Segment qui indiquera un asset Data Essence Track / D-Cinema Timed Text.

Les descripteurs

Nos éléments importants seront les items ResourceID et les Descriptors et Sub-Descriptors

L'identifiant dans ResourceID servira comme Id dans le fichier XML de sous-titres :

Les Descriptors & Sub-Descriptors vont faire un lien avec des sous-descriptors qui indiqueront qu'il existe des assets supplémentaires en plus des sous-titres.

Dans notre cas, nous avons un TimedText Resource Sub-Descriptor de la sorte :

Nous constatons directement via l'item MIMEMediaType que l'asset supplémentaire sera une police d'écriture (font).

C'est l'une des particularités des MXF de sous-titres. Contrairement aux autres MXF qui n'intègreront qu'un type d'essence (par exemple que du JPEG2000 pour un MXF Picture, que du PCM Wave pour un MXF Sound), un MXF sous-titres va intégrer tout ce qui permettra à la projection d'afficher des sous-titres : nous pourrons donc avoir un fichier XML, des fichiers PNG, des fichiers Fonts.

Tous se trouveront dans la Partition Body, mais avec une petite subtilité (oui, une autre).

Il peut y avoir un Partition Pack - Generic Stream Partition ² pour séparer TimedText Essence (le fichier XML de sous-titres) et TimedText Ancillary Resource (les données nécessaires au rendu : PNG ou Font TTF).

Juste après le Partition Pack Body, on retrouve notre TimedText Essence. et à la suite, nous aurons notre Partition Pack - Generic Stream Partition qui intègre notre Ancillary Resource.

Les différents assets (XML, PNG, Font) sont stockés à même dans le container KLV (comme le JPEG2000), il suffit d'extraire la donnée pour récupérer les différents fichiers dans leurs intégrités et leurs intégralités. (également avec un MXF chiffré mais il faudra passer par la case déchiffrement avant :)

Voila comment s'articulent les interconnexions entre les descripteurs et les essences avec un exemple comprenant un sous-titrage, une police de caractères et une image de sous-titre :

Contenu d'un fichier sous-titres classique

Si nous extrayons notre contenu XML depuis notre container KLV, voici ce que nous obtiendrons :

Les sous-titres sont sous un format XML brut avec les données lisibles facilement.

La syntaxe XML SubtitleReel regorge énormément d'éléments permettant l'affichage des sous-titres avec une grande flexibilité. Cette syntaxe est décrite dans la norme SMPTE SMPTE 428-7-2014 - Subtitle.

L'identifiant Id se trouve dans le KLV TimedText Essence Descriptor à l'item ResourceID :

TimedText Essence Descriptor : ╓─────────────────────────────────────────────────────────────────────────────────────────────────────────────────── ║ 3C0A - Instance UID ║ cec7a5db.6f704e01.a635ca9d.ed447d75 ║ FFFF - Descriptors & Sub-Descriptors (SMPTE) ║ 1 item(s): d9b0abda.74f34dc9.81fc9283.d06404ee ║ 3006 - Linked Track ID ║ 2 ║ 3001 - Sample Rate ║ 25/1 ║ 3002 - Container Duration ║ 270001 ║ 3004 - Essence Container ║ 060e2b34.0401010a.0d010301.02130101 (TimedText Essence Container) ║ 3E01 - Data Essence Coding (v5) ║ 00000000.00000000.00000000.00000000 ║ FFFE - TimedText - ResourceID ║ 300907bd.10744cfa.bd883073.449527ff ║ FFFD - TimedText - UCSEncoding ║ UTF-8 ║ FFFC - TimedText - NamespaceURI ║ http://www.smpte-ra.org/schemas/428-7/2010/DCST ╙───────────────────────────────────────────────────────────────────────────────────────────────────────────────────────

L'identifiant dans LoadFont ³ (3dec6dc0-39d0-498d-97d0-928d2eb78391) se trouve dans l'un des KLV TimedText Essence - Sub-Descriptors à l'item AncillaryResourceID :

TimedText Resource Sub-Descriptor : ╓────────────────────────────────────────────────────────────────────────────────────────────────────── ║ 3C0A - Instance UID ║ d9b0abda.74f34dc9.81fc9283.d06404ee ║ FFFB - TimedText - AncillaryResourceID ║ 3dec6dc0.39d0498d.97d0928d.2eb78391 ║ FFFA - TimedText - MIMEMediaType ║ application/x-font-opentype ║ 3F07 - BodySID ║ 10 ╙──────────────────────────────────────────────────────────────────────────────────────────────────────

La police de caractère se trouvera dans un container TimedText Essence - Ancillary Resource.

Contenu d'un fichier sous-titres avec des images

Les normes permettent qu'un fichier de sous-titres puissent pointer vers des images.

Cet identifiant se retrouvera dans un des KLV TimedText Resource Sub-Descriptor via l'item AncillaryResourceID.

Les images seront stockées dans les KLV TimedText Essence - Ancillary Resource.

Dans notre exemple, nous n'avons que 10 sous-titres image, nous devrions retrouver 10 TimedText Resource Sub-Descriptor et 10 TimedText Essence - Ancillary Resource dans notre MXF de tests :

Et si nous regardons à l'intérieur en récupérant les identifiants des assets :

Ce sont bien tous nos identifiants qui se trouvent dans notre fichier de sous-titres XML.

Nos AncillaryResourceID correspondent bien aux ID dans notre fichier de sous-titres :

Nos images correspondantes sont stockées dans nos KLV Ancillary Resources :

Notez que la police de caractère (Font) peut être extraite de la même manière, elle est aussi stockée complètement dans un TimedText Essence Ancillary Resource.

Conclusion

Le MXF de sous-titres est un cas très particulier, comme nous l'avons vu, nous pouvons passer d'un asset XML, à un asset Font puis finir avec des assets PNG.

La syntaxe XML a été survolée (elle sera peut-être complétée par la suite), elle comporte énormément d'éléments permettant de placer les différents éléments à l'écran et dans quasiment n'importe quelle configuration. Elle s'intègre parfaitement avec les différentes langues à travers le monde.

Samples

Ressources annexes

Notes

Les images sous-titres PNG doivent être en RGB, 8 bits par couleur. ↩
Quelques références normatives : ↩
- 6.1 Overview - A Generic Stream Partition is a special kind of Body Partition -- SMPTE 410-2008 - MXF - Generic Stream Partition
- The timed-text resource is contained in an MXF Generic Container (GC) in the Body partition, and any ancillary resources are individually contained in their own Generic Stream partitions. -- SMPTE 429-5-2017 - DCP - Timed Text Track File
Les MXF pour les sous-titres possèdent des Generic Stream Partition Pack qui seront insérés après le Partition Body. Ils se comportent comme des sous-Partition Body. Ils auront l'Universal Label 060e2b34.02050101.0d010201.01031100 (Partition Pack - Body - Generic Stream Partition).

Exemple d'un output avec des sous-Partitions Generic Stream :
```
(...)
060e2b34.02050101.0d010201.01030400 - Partition Pack - Body - Closed & Complete          <== Partition Body principal
060e2b34.01020101.0d010301.17010b01 - TimedText Essence (v9)
060e2b34.02050101.0d010201.01031100 - Partition Pack - Body - Generic Stream Partition   <== Sous Partition Body pour le TimeText suivant
060e2b34.0101010c.0d010509.01000000 - TimedText - Ancillary Resource
060e2b34.02050101.0d010201.01040400 - Partition Pack - Footer - Closed & Complete
(..)
```
Les Universal Label du Operational Pattern seront des OP-Atom (060e2b34.04010102.0d010201.10000000), celui du Partition Pack Body - Generic Stream Partition sera 060e2b34.04010101.0d010201.01010100, donc un Single Item et Single Package (OP-1A).
Il ne peut y avoir qu'une seule Font When Text elements are present in the Timed Text essence, one (1) LoadFont element shall be present. Timed Text essence shall not contain more than one (1) LoadFont element. -- SMPTE 429-2-2013 - DCP Operational Constraints. ↩
7.2.3 StartTime Element - The StartTime element shall be present, and the value shall be 00:00:00:ZeroE as defined In SMPTE ST 428-7 ↩
7.2.4 First Timed Text Event - The composition’s first Timed Text event’s TimeIn attribute as defined In SMPTE ST 428-7 should be greater than or equal to the value of 00:00:04:ZeroE (four [4] seconds). ↩
7.2.5 Spot Duration - All Subtitle instances as defined In SMPTE ST 428-7 should have a minimum duration of 15 frames with a minimum duration of 2 frames between Subtitle instances. ↩
Pourquoi un MXF avec un KLV TimedText Essence Element en v1 et un autre en v9 ? Dans la dernière documentation SMPTE 439-5-2017 Timed Text Track File, la version (octet 8) doit être 0x01, il se peut que la version 0x09 puisse correspondre à une ancienne version. ↩

#1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 _______________________________________________ 06 0e 2b 34 01 02 01 01 0d 01 03 01 17 01 0b 01 06 0e 2b 34 01 02 01 09 0d 01 03 01 17 01 0b 01 ^^----------------------- version

Références	SMPTE 429-5-2017 - DCP - Timed Text Track File (MXF, SMPTE) SMPTE 429-12-2008 - DCP - Caption and Closed Subtitle (Syntaxe CPL, SMPTE) SMPTE 428-7-2014 - Digital Cinema Distribution Master – Subtitle (Syntaxe XML SubtitleReel, SMPTE) SMPTE 428-10-2008 - Closed Caption and Closed Subtitle (Syntaxe XML, Ajout) Subtitle Specification for Projection Technology DLP Cinema (v1.1) (Syntaxe XML DCSubtitle, Interop, obsolète) Font : Open Font Format - ISO/IEC 14496-22:2019 - Part 22
Modèle KLV	Data Item (non chiffré) Variable-Length Pack (chiffré)
Universal Label	06.0e.2b.34.02.53.01.01.0d.01.01.01.01.01.64.00 - TimedText Essence Descriptor 06.0e.2b.34.02.53.01.01.0d.01.01.01.01.01.65.00 - TimedText Resource Sub-Descriptor 06.0e.2b.34.01.02.01.01.0d.01 03.01.17.01.0b.01 - TimedText Essence - SMPTE 2017 06.0e.2b.34.01.02.01.09.0d.01 03.01.17.01.0b.01 - TimedText Essence - Deprecated ? 06.0e.2b.34.01.02.01.**.0d.01 03.01.17.01.0b.01 - TimedText Essence - Toutes versions ---- ---- ---- \| \| \| \| \| +------- Essence Element Number (toujours 1) \| +---------- Clip Wrapped Element +------------- nombre d'élément XML (toujours 1) 06.0e.2b.34.01.01.01.0c.0d.01.05.09.01.00.00.00 - TimedText Ancillary Resource (Essence Extra) 06.0e.2b.34.02.53.01.0a.0d.01.01.01.02.13.01.01 - TimedText Essence Container Label

MXF : Subtitle : Les sous-titres (et ses compagnons)

Préface