0

我想在存储库更新期间将二进制内容从分段存储迁移到新的数据存储。我的存储库的当前版本是 1.6.1。它正在使用 TarMK 分段存储，并且没有数据存储。根据我的经验，在文件数据存储中包含二进制文件可以显着提高性能。这就是我升级到 1.26.0 时想要做的事情。但是如何将二进制文件复制到新的数据存储？

此命令将我的内容迁移到新存储库。应用程序正确加载内容。但是没有数据存储。

$ java -jar ~/oak-upgrade-1.26.0.jar --copy-binaries 
    --copy-orphaned-versions=false --copy-versions=false 
    --include-paths=/apps/lsa,/content/lsa,/var/recyclebin/content/lsa 
    ../dev-jun-author/sling/repository sling/repository

当我尝试使用此命令将二进制文件复制到新数据存储时...

  $ java -jar ~/oak-upgrade-1.26.0.jar --copy-binaries 
         --include-paths=/apps/lsa,/content/lsa,/var/recyclebin/content/lsa 
         --datastore=sling/repository/datastore ../dev-jun-author/sling/repository sling/repository

它具有以下输出..

24.08.2020 16:43:12.263 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.MigrationOptions - copyVersions 参数设置为 1969-12-31 24.08.2020 16:43:12.265 [main] INFO org .apache.jackrabbit.oak.upgrade.cli.parser.MigrationOptions - copyOrphanedVersions 参数设置为 1969-12-31 24.08.2020 16:43:12.265 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser。 MigrationOptions - 要包含的路径：[/apps/lsa、/content/lsa、/var/recyclebin/content/lsa] 24.08.2020 16:43:12.265 [main] INFO org.apache.jackrabbit.oak.upgrade.cli。 parser.MigrationOptions - 缓存大小：256 MB 24.08.2020 16:43:12.269 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.StoreArguments - 来源：SEGMENT_TAR[../dev-jun-author/sling/repository] ​​24.08.2020 16:43:12.271 [main] INFO org.apache.jackrabbit .oak.upgrade.cli.parser.StoreArguments - 目的地：SEGMENT_TAR[sling/repository] ​​24.08.2020 16:43:12.296 [main] INFO org.apache.jackrabbit.oak.segment.file.FileStore - 创建文件存储 FileStoreBuilder{version=1.26.0, directory=../dev-jun-author/sling/repository/segmentstore, blobStore=null, maxFileSize=256, segmentCacheSize=256，stringCacheSize=256，templateCacheSize=64，stringDeduplicationCacheSize=15000，templateDeduplicationCacheSize=3000，nodeDeduplicationCacheSize=1048576，memoryMapping=false，offHeapAccess=false，gcOptions=SegmentGCOptions{paused=false，estimateDisabled=false，gcSizeDeltaEstimation=1073741824，retryCount=1073741824 5，forceTimeout=60，retainedGenerations=2，gcType=FULL}} 24.08.2020 16:43:12.428 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore - TarMK ReadOnly 打开：../dev- jun-author/sling/repository/segmentstore (mmap=false) 24.08.2020 16:43:12.601 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore - TarMK 关闭：../dev-jun-author/sling/repository/segmentstore 24.08.2020 16:43:12.618 [main] INFO org.apache.jackrabbit.oak .upgrade.cli.parser.DatastoreArguments - SEGMENT_TAR[../dev-jun-author/sling/repository] ​​中嵌入的 Blob 将被复制到 FileDataStore[sling/repository/datastore] 24.08.2020 16:43:12.619 [main]信息 org.apache.jackrabbit.oak.upgrade.cli.parser.DatastoreArguments - 源 blob 存储：DummyBlobStore 24.08.2020 16:43:12.619 [main] INFO org.apache.jackrabbit.oak.segment.file.FileStore - 创建文件存储 FileStoreBuilder{version=1.26.0, directory=../dev-jun-author/sling/repository/segmentstore, blobStore=null, maxFileSize=256, segmentCacheSize=256, stringCacheSize=256, templateCacheSize=64, stringDeduplicationCacheSize=15000, templateDeduplicationCacheSize=3000, nodeDeduplicationCacheSize=1048576, memoryMapping=true, offHeapAccess=false, gcOptions=SegmentGCOptions{paused=false, estimateDisabled=false, gcSizeDeltaEstimation=1073741824, retryCount=1073741824 5，forceTimeout=60，retainedGenerations=2，gcType=FULL}} 24.08.2020 16:43:12.632 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore - TarMK ReadOnly 打开：../dev- jun-author/sling/repository/segmentstore (mmap=true) 24.08.2020 16:43:12.635 [main] INFO org.apache.jackrabbit.oak.segment.SegmentNodeStore$SegmentNodeStoreBuilder

  • 创建段节点存储 SegmentNodeStoreBuilder{blobStore=inline} 24.08.2020 16:43:12.644 [main] INFO org.apache.jackrabbit.oak.segment.scheduler.LockBasedScheduler - 在启用 commitFairLock 选项的情况下初始化 SegmentNodeStore。24.08.2020 16:43:12.654 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.DatastoreArguments - 目标 blob 存储：FileDataStore [sling/repository/datastore] 24.08.2020 16:43:12.665 [main ]信息 org.apache.jackrabbit.oak.segment.file.FileStore - 创建文件存储 FileStoreBuilder{version=1.26.0, directory=sling/repository/segmentstore, blobStore=DataStore 支持的 BlobStore [org.apache.jackrabbit.oak.plugins.blob .datastore.OakFileDataStore], maxFileSize=256, segmentCacheSize=256, stringCacheSize=256, templateCacheSize=64, stringDeduplicationCacheSize=15000, templateDeduplicationCacheSize=3000, nodeDeduplicationCacheSize=1048576, memoryMapping=true, offHeapAccess=false, gcOptions=SegmentGCOptions{paused=false,估计禁用=假，gcSizeDeltaEstimation=1073741824，retryCount=5，forceTimeout=60，retainedGenerations=2，gcType=FULL}}

Sling 的错误日志有这个输出

25.08.2020 10:32:35.030错误[0:0:0:0:0:0:0:1 [1598365955029] GET /content/lsa/assets/Screen%20Shot%202020-04-15%20at%204.06.14%20PM.png HTTP/1.1] org.apache.sling.engine.impl.SlingRequestProcessorImpl service: Uncaught Throwable java.lang.IllegalStateException: Attempt to read external blob with blobId [d4c06d8a7e0b3381caa5c918d6403319d603dd153e5ce32f663e940af55f0326#815933] without specifying BlobStore at org.apache.jackrabbit.oak.segment.SegmentBlob.getBlob (SegmentBlob.java:248) [org.apache.jackrabbit.oak-segment-tar:1.26.0] 在 org.apache.jackrabbit.oak.segment.SegmentBlob.getNewStream(SegmentBlob.java:253) [org.apache. jackrabbit.oak-segment-tar:1.26.0] 在 org.apache.jackrabbit.oak.segment.SegmentBlob.getNewStream(SegmentBlob.java:84) [org.apache.jackrabbit.oak-segment-tar:1.26.0]在 org.apache.jackrabbit.oak.plugins.value.jcr.BinaryImpl.getStream(BinaryImpl.java:59) [org.apache.jackrabbit.oak-store-spi:1.26.0] 在 org.apache.sling.jcr.resource.internal.helper.LazyInputStream.getStream(LazyInputStream.java:106) [org.apache.sling.jcr.resource: 3.0.20] 在 org.apache.sling.jcr.resource.internal.helper.LazyInputStream.read(LazyInputStream.java:65) [org.apache.sling.jcr.resource:3.0.20] 在 org.apache.commons .io.IOUtils.copyLarge(IOUtils.java:2314) [org.apache.commons.io:2.6.0] 在 org.apache.commons.io.IOUtils.copy(IOUtils.java:2270) [org.apache. commons.io:2.6.0] 在 org.apache.commons.io.IOUtils.copyLarge(IOUtils.java:2291) [org.apache.commons.io:2.6.0] 在 org.apache.commons.io.IOUtils .copy(IOUtils.java:2246) [org.apache.commons.io:2.6.0] 在 com.peregrine.rendition.RenditionsServlet$StreamResponse.writeTo(RenditionsServlet.java:191) [com.peregrine-cms.base. core:1.0.0.SNAPSHOT] 在 com.peregrine.commons.servlets。AbstractBaseServlet.doRequest(AbstractBaseServlet.java:133) at com.peregrine.commons.servlets.AbstractBaseServlet.doGet(AbstractBaseServlet.java:82) at org.apache.sling.api.servlets.SlingSafeMethodsServlet.mayService(SlingSafeMethodsServlet.java:266) [org.apache.sling.api:2.22.0] 在 org.apache.sling.api.servlets.SlingAllMethodsServlet.mayService(SlingAllMethodsServlet.java:137) [org.apache.sling.api:2.22.0] 在 org. apache.sling.api.servlets.SlingSafeMethodsServlet.service(SlingSafeMethodsServlet.java:342) [org.apache.sling.api:2.22.0] 在 org.apache.sling.api.servlets.SlingSafeMethodsServlet.service(SlingSafeMethodsServlet.java: 374）[org.apache.sling.api:2.22.0] 在 org.apache.sling.engine.impl.request.RequestData.service（RequestData.java:552）[org.apache.sling.engine:2.7.2 ] 在 org.apache.sling.engine.impl.filter.SlingComponentFilterChain。渲染（SlingComponentFilterChain.java:44）[org.apache.sling.engine:2.7.2] 在 org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain.java:82）[org.apache.sling .engine:2.7.2] 在 org.apache.sling.engine.impl.SlingRequestProcessorImpl.processComponent(SlingRequestProcessorImpl.java:283) [org.apache.sling.engine:2.7.2] 在 org.apache.sling.engine。 impl.filter.RequestSlingFilterChain.render(RequestSlingFilterChain.java:49) [org.apache.sling.engine:2.7.2] at org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter(AbstractSlingFilterChain.java:82) [org.apache.sling.engine:2.7.2] 在 org.apache.sling.engine.impl.debug.RequestProgressTrackerLogFilter.doFilter(RequestProgressTrackerLogFilter.java:110) [org.apache.sling.engine:2.7.2] 在org.apache.sling.engine.impl.filter.AbstractSlingFilterChain。doFilter(AbstractSlingFilterChain.java:72) [org.apache.sling.engine:2.7.2] at org.apache.sling.i18n.impl.I18NFilter.doFilter(I18NFilter.java:131) [org.apache.sling.i18n :2.5.14] 在 org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter(AbstractSlingFilterChain.java:72) [org.apache.sling.engine:2.7.2] 在 org.apache.sling.engine。 impl.filter.AbstractSlingFilterChain.doFilter(AbstractSlingFilterChain.java:78) [org.apache.sling.engine:2.7.2] 在 org.apache.sling.engine.impl.SlingRequestProcessorImpl.doProcessRequest(SlingRequestProcessorImpl.java:151) [org.apache.sling.engine.impl.SlingRequestProcessorImpl.doProcessRequest(SlingRequestProcessorImpl.java:151) .apache.sling.engine:2.7.2] 在 org.apache.sling.engine.impl.SlingMainServlet.service(SlingMainServlet.java:250) [org.apache.sling.engine:2.7.2] 在 org.apache。 felix.http.base.internal.handler.ServletHandler.handle(ServletHandler.java:123) [org.apache.felix.http.jetty:4.0.18] 在 org.apache。felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:86) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.sling.junit.impl.servlet.TestLogServlet$ TestNameLoggingFilter.doFilter(TestLogServlet.java:257) [org.apache.sling.junit.core:1.0.26] 在 org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty ：4.0.18] 在 org.apache.sling.i18n.impl.I18NFilter.doFilter(I18NFilter.java:131) [org.apache.sling.i18n:2.5.14] 在 org.apache.felix.http.base。 internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.爪哇：81) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.sling.engine.impl.log.RequestLoggerFilter.doFilter(RequestLoggerFilter.java:75) [org.apache.sling.engine:2.7 .2] 在 org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix。 http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.sling.engine.impl.parameters.RequestParameterSupportConfigurer.doFilter( RequestParameterSupportConfigurer.java:67) [org.apache.sling.engine:2.7.2] 在 org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix .http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.dispatch.Dispatcher$1.doFilter(Dispatcher.java:146) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix。 http.base.internal.whiteboard.WhiteboardManager$2.doFilter(WhiteboardManager.java:1002) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.sslfilter.internal.SslFilter.doFilter (SslFilter.java:97) [org.apache.felix.http.sslfilter:1.2.6] 在 org.apache.felix.http.base.internal.handler.PreprocessorHandler.handle(PreprocessorHandler.java:136) [org. apache.felix.http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.whiteboard.WhiteboardManager$2.doFilter(WhiteboardManager.java:1008) [org.apache.felix.http.jetty:4.0 .18] 在 org.apache.felix.http.base.internal.whiteboard.WhiteboardManager.invokePreprocessors(WhiteboardManager.java:1012) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix。http.base.internal.dispatch.Dispatcher.dispatch(Dispatcher.java:91) [org.apache.felix.http.jetty:4.0.18] 在 org.apache.felix.http.base.internal.dispatch.DispatcherServlet。服务（DispatcherServlet.java:49）[org.apache.felix.http.jetty:4.0.18] 在 javax.servlet.http.HttpServlet.service（HttpServlet.java:725）[org.apache.felix.http.servlet -api:1.1.2] 在 org.eclipse.jetty.servlet.ServletHolder.handle(ServletHolder.java:763) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.servlet。 ServletHandler.doHandle(ServletHandler.java:551) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.ScopedHandler.nextHandle(ScopedHandler.java:233) [org.apache .felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.session.SessionHandler.doHandle(SessionHandler.java:1610) [org.apache.felix.http.jetty:4.0.18] 在 org. eclipse.jetty.server.handler。ScopedHandler.nextHandle(ScopedHandler.java:233) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1363) [org.apache .felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.ScopedHandler.nextScope(ScopedHandler.java:188) [org.apache.felix.http.jetty:4.0.18] 在 org. eclipse.jetty.servlet.ServletHandler.doScope(ServletHandler.java:489) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.session.SessionHandler.doScope(SessionHandler.java: 1580）[org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.ScopedHandler.nextScope（ScopedHandler.java:186）[org.apache.felix.http.jetty:4.0 .18] 在 org.eclipse.jetty.server.handler 的 org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1278) [org.apache.felix.http.jetty:4.0.18]。范围处理程序。句柄（ScopedHandler.java:141）[org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.ContextHandlerCollection.handle（ContextHandlerCollection.java:221）[org.apache.felix .http.jetty:4.0.18] 在 org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse。 jetty.server.Server.handle(Server.java:500) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.HttpChannel.lambda$handle$1(HttpChannel.java:383 ) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.HttpChannel.dispatch(HttpChannel.java:547) [org.apache.felix.http.jetty:4.0.18]在 org.eclipse.jetty.server.HttpChannel.handle(HttpChannel.java:375) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.server.HttpConnection.onFillable(HttpConnection.java :273) [org.apache.felix.http。jetty:4.0.18] at org.eclipse.jetty.io.AbstractConnection$ReadCallback.succeeded(AbstractConnection.java:311) [org.apache.felix.http.jetty:4.0.18] at org.eclipse.jetty.io .FillInterest.fillable(FillInterest.java:103) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.io.ChannelEndPoint$2.run(ChannelEndPoint.java:117) [org.apache .felix.http.jetty:4.0.18] 在 org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask(EatWhatYouKill.java:336) [org.apache.felix.http.jetty:4.0.18] 在org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce(EatWhatYouKill.java:313) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.util.thread.strategy。 EatWhatYouKill.tryProduce(EatWhatYouKill.java:171) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.run(EatWhatYouKill.java:129) [org. .apache.felix.http。jetty:4.0.18] 在 org.eclipse.jetty.util.thread.ReservedThreadExecutor$ReservedThread.run(ReservedThreadExecutor.java:375) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty .util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:806) [org.apache.felix.http.jetty:4.0.18] 在 org.eclipse.jetty.util.thread.QueuedThreadPool$Runner.run(QueuedThreadPool.java :938) [org.apache.felix.http.jetty:4.0.18] 在 java.base/java.lang.Thread.run(Thread.java:834)18] 在 java.base/java.lang.Thread.run(Thread.java:834)18] 在 java.base/java.lang.Thread.run(Thread.java:834)

我可以看到存储库有一个带有一些文件夹的数据存储。但是我的 Sling 应用程序中的图像不起作用。如何使用 Oak-upgrade 或其他实用程序将二进制文件迁移到数据存储？

4

1 回答 1

0

我很久以前做过一次。您拆分存储库的命令看起来是正确的。您可以在运行 Oak-upgrade 工具后检查数据存储文件夹，以查看是否创建了文件。

在新（拆分）存储库位置启动 Sling 之前，不要忘记创建所需的配置文件以使用文件数据存储。

在至少包含此属性的文件夹中创建一个org.apache.jackrabbit.oak.plugins.blob.datastore.FileDataStore.config文件：install

path="./repository/datastore"

还要在至少包含此属性的文件夹中创建一个org.apache.jackrabbit.oak.plugins.segment.SegmentNodeStoreService.config文件：install

customBlobStore=B"true"

Oak-upgrade 工具默认使用的 minRecordLength 为 16384 字节。

有关更多详细信息，请参阅https://jackrabbit.apache.org/oak/docs/osgi_config.html#config-sling。

我还建议在拆分二进制文件时不要进行部分内容迁移。Sling 中的所有内容都是内容，包括您的 OSGi 包等。

于 2020-09-01T15:25:03.423 回答