我正在开发应该利用 Google 相机的新深度图生成功能的 Android 应用程序。

基本上谷歌已经描述了使用的元数据here

我可以访问大部分元数据，但不幸的是，最重要的数据被编码为 extendedXmp，我无法获得任何 XMP 解析库来正确解析它!

我尝试过 Commons-Imaging、元数据提取器和最近的 Adob​​es XMPCore

XMPCore 可能能够处理扩展版本，但没有文档说明如何让它解析 JPG 文件中的数据，它假设要传递原始 XMP 数据

是否有包含 JPG 文件扩展部分的 XMP 解析的任何正确实现，或者我只是做错了什么？

这是我的尝试:

使用 Commons-Imaging:

                try {
                    String imageParser = new JpegImageParser().getXmpXml(new ByteSourceInputStream(imageStream, "img.jpg"), new HashMap<String, Object>());

                    Log.v(TAG, imageParser);

                } catch (ImageReadException e1) {
                    // TODO Auto-generated catch block
                    e1.printStackTrace();
                }

使用元数据提取器

                Metadata metadata = ImageMetadataReader.readMetadata(
                        new BufferedInputStream(imageStream), false);


                XmpDirectory xmp = metadata
                        .getDirectory(XmpDirectory.class);
                XMPMeta xmpMeta = xmp.getXMPMeta();



                String uri = "http://ns.google.com/photos/1.0/depthmap/";

                Log.v(TAG, xmpMeta.doesPropertyExist(uri, "GDepth:Format") + " " );

                try {
                    XMPProperty hasExtendedXMP = xmpMeta.getProperty("http://ns.adobe.com/xmp/note/", "xmpNote:HasExtendedXMP");

                    Log.v(TAG, hasExtendedXMP.getValue().toString() + " " + new String(Base64.decode(hasExtendedXMP.getValue().toString(), Base64.DEFAULT)));

                } catch (XMPException e) {
                    e.printStackTrace();
                }

最佳答案

最初，Adobe 预计 XMP 数据长度不会超过一个 JPEG 段的限制(约 64K)，并且他们的 XMP 规范规定 XMP 数据必须适合一个。后来当他们发现单个 JPEG APP1 段不足以容纳 XMP 数据时，他们更改了规范以允许整个 XMP 数据有多个 APP1 段。数据分为两部分:标准 XMP 和扩展 XMP。标准 XMP 部分是带有包包装器的“正常”XMP 结构，而 ExtendedXMP 部分没有包包装器。 ExtendedXMP 数据可以进一步划分以适应多个 APP1。

以下引用来自 Adob​​e XMP 规范第 3 部分，用于作为 JPEG APP1 的 ExtendedXMP block :

Each chunk is written into the JPEG file within a separate APP1 marker segment. Each ExtendedXMP marker segment contains:

• A null-terminated signature string of "http://ns.adobe.com/xmp/extension/".
• A 128-bit GUID stored as a 32-byte ASCII hex string, capital A-F, no null termination. The GUID is a 128-bit MD5 digest of the full ExtendedXMP serialization.
• The full length of the ExtendedXMP serialization as a 32-bit unsigned integer
• The offset of this portion as a 32-bit unsigned integer.
• The portion of the ExtendedXMP

我们可以看到除了以空字符结尾的字符串作为 ExtendedXMP 数据的 id，还有一个 GUID，它应该与标准 XMP 部分中的值相同。偏移量用于连接 ExtendedXMP 的不同部分 - 因此 ExtendedXMP APP1 的序列甚至可能不按顺序排列。然后是实际数据部分，这就是为什么@Matt 的回答需要某种方法来修复字符串。还有另一个值 - ExtendedXMP 序列化的全长，它有两个目的:检查数据的完整性以及提供用于连接数据的缓冲区大小。

当我们找到一个ExtendedXMP段时，我们需要将当前数据与其他ExtendedXMP段连接起来，最后得到整个ExtendedXMP数据。然后，我们将两个 XML 树连接在一起(也从标准 XMP 部分中删除 GUID)以检索整个 XMP 数据。

我做了一个图书馆icafe在 Java 中可以提取和插入 XMP 以及 ExtendedXMP。 ExtendedXMP 的一个用例是谷歌的深度图数据，它实际上是作为元数据隐藏在实际图像中的灰度图像，在 JPEG 的情况下，作为 XMP 数据。深度图图像可以用于例如模糊原始图像。深度图数据通常很大，必须拆分为标准和扩展 XMP 部分。整个数据是 Base64 编码的，可以是 PNG 格式。

以下是示例图像和提取的深度图:

原图来自here .

注:最近又发现一个website谈论 Google Cardboard Camera 应用程序，它可以利用 JPEG XMP 数据中嵌入的图像和音频。 ICAFE现在支持从此类图像中提取图像和音频。可以找到示例用法 here使用以下调用 JPEGTweaker.extractDepthMap()

这是 ICAFE 从谈论 Google Cardboard 相机应用的网站上的原始图片中提取的图片:

很遗憾，我找不到在此处插入 MP4 音频的方法。

关于java - 读取 JPG 文件的 XMP 元数据，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/23253281/