问题标签 [snappydata]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
apache-spark - SnappyData - 配置流式作业火花设置
在创建流式应用程序时,我可以看到如何配置 SparkConf(请参见此处)
我假设我可以通过 SnappyStreamingContext 为类似于流应用程序的流作业配置 SparkConf。假设我在流式作业中获得了 SparkConf 的句柄并修改了一些设置。这些设置是否仅适用于此流式传输作业,还是所有作业的全局配置更新?
谢谢!
snappydata - HDFS读写模式下的SnappyData是否支持表中的主键?
我正在阅读有关 SnappyData 中的 HDFS 持久性模式的信息,并且在文档中令人困惑。
可以创建具有读取/写入 HDFS 的主键的表吗?
http://rowstore.docs.snappydata.io/docs/disk_storage/persist-hdfs-topics.html
maven - 在 Maven 中找不到 SnappyData 0.6 版
https://github.com/SnappyDataInc/snappydata/releases
如果这是问这个问题的错误论坛,我提前道歉。
我们对 0.6 版感兴趣。根据自述文件,maven 存储库应包含以下项目:
groupId:io.snappydata artifactId:snappy-core_2.10 版本:0.6
groupId:io.snappydata artifactId:snappy-cluster_2.10 版本:0.6
github 上提供了 snappy-core jar 的链接,但不提供集群 jar 的链接。由于 0.5 和 0.6 之间的 scala 依赖错误,这阻止了我们的流媒体应用程序的构建。
有人可以建议吗?谢谢!
sql - 增加 Spark 上的 Java 内存以构建大型哈希关系
我目前正在尝试在 SnappyData 上运行 TPC-H 查询。起初,查询给了我一个错误说
ERROR 38000: (SQLState=38000 Severity=-1) (Server=localhost[1528],Thread[DRDAConnThread_29,5,gemfirexd.daemons]) 异常'此连接的双方都超出了广播阈值,计算它可能会令人望而却步昂贵的。要显式启用它,请设置 spark.sql.crossJoin.enabled = true;' 在评估表达式时抛出。
启用 spark 的 sql crossjoins 并重新运行查询后,错误弹出说:
请让我知道如何增加用于构建哈希关系的内存量。
以防万一,查询在下面,我试图在 1GB 数据集上运行它(我确实在空数据集上尝试了查询,它确实有效)。TPC-H 查询 16:
apache-spark-sql - snappy-data 与预先构建的现有 spark 集群
数据我会将我的 Spark 集群与 apache Hadoop 配置集成,它工作正常,然后我开始将我的 Spark 集群与 Azure 数据湖存储集成,它也工作正常,作为参考,我将这个链接用于 spark 与 azure 数据湖,然后我需要将 spark 与 Snappy 数据集成集成,根据 snappy-data 文档我们可以使用 snappy-data 包
./bin/spark-shell --conf spark.snappydata.store.sys-disk-dir=quickstartdatadir --conf spark.snappydata.store.log-file=quickstartdatadir/quickstart.log --packages "SnappyDataInc:snappydata:0.7 -s_2.11"
执行此 One 后,我可以创建 Snappy 会话,但无法创建 Snappy 数据表。我在像 HiveUtill 包和 Org.apache.slf jar 问题上也面临这个问题。如果有人知道如何解决该问题,请告诉我谢谢..
apache-spark-sql - 如何在 snappy-data sql 数据库中使用 REST 服务
嗨,我开始学习 snappy-data 文档版本 0.7,以便连接到 REST 调用以访问 snappy-data 数据库,我不知道如何将 REST 服务与 snappy-data 一起使用,你能告诉我任何人如何这样做,我在 snappy 数据文档中搜索了我无法到达它的位置,如果有人知道,请告诉我谢谢..
apache-spark-sql - 如何将 snappy-data 服务器与 Apache zeppelin 连接以获得 %snappy.sql 查询支持
我目前正在研究 snappy-data sql 查询功能,对 Apache zeppelin 的 Snappy-data 支持,我们可以使用 Apache zeppelin 连接到 snappy-data 来完成所有功能,然后我按照 snappy-data 文档 snappy 配置了所有设置- 带有 zeppelin链接的数据,但在完成此操作后,我可以使用 snappy 数据 Scala 编程运行使用 spark 解释器,同时我无法使用 snappy-data 解释器运行作业,它通过“org.apache. thrift.transport.TTransportException" 即使我检查了我的日志,同样的错误也只出现在日志文件中。你能告诉我任何人都知道这是什么问题吗?如果对这个问题有任何了解,请分享给我,谢谢。
azure - 我们是否能够使用 Snappy-data 更新 Azure 数据湖中的记录?还是仅附加 Azure 数据湖?
我目前正在使用 snappy-data 集成开发 azure 数据湖,我有一个关于 snappy-data 的查询,我们是否能够将 snappy-data 中的数据更新到 azure 数据湖存储,或者我们只能附加到 azure 数据湖上我在论坛上搜索了存储,但我无法找到合适的解决方案,如果有人知道关于它的查询,请分享,谢谢。
hadoop - 如何将 snappy-data 连接到 hdfs
嗨,我开始学习 snappy-data 文档版本 0.7,以便使用 Apache hadoop 连接到 snappy-data,我正在关注这个文档链接,但是这个文档不太清楚如何将 snappy 行存储配置为 hdfs,我可以无法获取正确的解决方案,如果有人知道如何将 snappy-data 行存储配置为 hdfs,请分享给我,谢谢。
snappydata - snappy-data 示例在行存储模式下不起作用
我开始学习 snappy-data,并根据文档运行 snappy-data 示例,同时在 snappy-data 服务器中开始,如
$SNAPPY_HOME$ ./sbin/snappy-start-all.sh
./bin/run-example snappydata.JDBCExample
评论,snappy-data 示例正在执行,同时使用 snappy-data 行存储它在启动 snappy-data 时不起作用
" $SNAPPY_HOME$ ./sbin/./sbin/snappy-start-all.sh 行存储 "
./bin/run-example snappydata.JDBCExample
像这样我会执行评论。有人知道如何在行存储中运行 snappy 示例吗,请分享给我,谢谢.. 参考 snappy-data rows-tore 文档 链接..