问题标签 [mobius]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
c# - 找不到远程 Sparkclr jar;请用 --remote-sparkclr-jar 指定一个
我正在提交一个应用程序,sparkclr-submit
用于触发独立集群
但它抛出了一个错误:
找不到远程 Sparkclr jar;请指定一个
--remote-sparkclr-jar
我需要传递哪个远程sparkclr-jar
文件?
apache-spark - Mobius:Spark Sql:无法将类型“Microsoft.Spark.CSharp.Sql.DataFrame”隐式转换为“System.Collections.IEnumerable”
我正在尝试使用 spark SQL 从 MySQL 表中获取一些记录我在执行该查询时遇到错误
我想根据列的日期获取数据该列的数据类型是 MySQL 中的 DATETIME我正在使用.Net Technology
这是我正在执行的查询
老的:
这里 total_start 是我的表列,类型为 datetime 我想将输出作为 total_start 的日期、total_start 的周、total_start 的月份和 total_start 的年份
例外
方法或操作未实现
更新
将 qyery 更改为后:
得到了新的例外:
匿名托管的 DynamicMethods 程序集:无法将类型“Microsoft.Spark.CSharp.Sql.DataFrame”隐式转换为“System.Collections.IEnumerable”。存在显式转换(您是否缺少演员表?)
任何帮助将不胜感激
c# - Apache Spark + Mobius 调试模式
我是 Apache spark 的新手,并试图在带有 Mobius 的 Windows 机器上运行它。但我在运行它时遇到异常。首先我设置了以下环境变量
在代码中提供了正确的文件以从 file:///E:/Mobius/Mobius/SampleText.txt 读取数据
我试图在调试模式下运行它
在我的 App.config 中添加了以下条目 [我从上面得到的端口名称]
我收到以下异常消息
我不确定 CSharpWorkerPath。
如果有人更早遇到此类问题,请提供帮助。
c# - 通过 Mobius 向 Spark 提交 32 位应用程序
我的情况如下: 我想向 Spark 提交一个 32 位的驱动程序。驱动程序位于 C#(.NET Framework 控制台应用程序)中。我使用 Mobius ( https://github.com/Microsoft/Mobius/releases ) 启用 Spark fo C#。
该应用程序相当简单,并且具有非常简单的测试代码:
在我将此应用程序正确提交给 sparkclr(即,mobius 然后将其传递给 Spark 本身)后,我得到以下异常:
当我在 x64 中构建应用程序时,异常消失了。此外,当应用程序在 x86 中构建但什么都不做(即没有
行)。
是否有任何解决方法可以将 32 位应用程序提交到 Spark?
这可能是因为我有 64 位版本的 Java 吗?(我下载并安装的是jdk-8u161-windows-x64.exe)。
ruby - Errors Updating Ruby Gems
I'm trying to update my ruby gems, I had to go the manual route, download > unpack > CD there, the run: ruby setup.rb
To here I was good to go; now however, when trying to update said gems, or when I try to install the mobius network client, I get the following:
Is this something wrong on my side?
c# - 如何使用 Mobius 在数据块中从 C# 调用笔记本或运行作业?
我是 Databricks 的新手。是否可以从 C# 发送通过 API(如 Mobius)传递的代码以在 Databricks 中运行作业?
你能给我一些代码示例吗?例如,如果我想在其中包含 NoSql 代码的笔记本中运行一些作业。
谢谢你。
c# - 从 C# 列表创建数据框 - Spark for .NET
我目前是 .NET for Spark 的新手,需要将 C# 列表附加到增量表。我假设我首先需要创建一个 Spark DataFrame 来执行此操作。在示例代码中,我将如何将“名称”附加到数据框“df”?
现在看来,这已被弃用(https://github.com/Microsoft/Mobius),使用 RDD 不适用于新版本(https://github.com/dotnet/spark)
示例文件 people.json 如下所示:
c - 可以用光线追踪器渲染莫比乌斯带吗?
在我的光线追踪器中,所有表面都以原点为中心并以 Y 轴为中心。位移、旋转和调整大小是通过应用于光线的变换矩阵获得的。
我最近使用笛卡尔方程在光线追踪中渲染了一个圆环:
(x^2 + y^2 + z^2)^2 - 2 * (r1^2 + r2^2) * (x^2 + y^2 + z^2) + 4 * r1^2 * y^ 2 + (r1^2 - r2^2)^2
我用射线方程替换了每个点:
例如:X = Ray.ori.x + T * Ray.dir.x;
在方程中替换射线分量后,我得到了四次函数的 5 个系数,可用于通过 4 次多项式求解器算法找到方程根(T 交点)。
我想知道是否可以以相同的方式渲染莫比乌斯带。我的研究并没有带来太多,我发现了一些使用三次方程的光线跟踪代码,但是复制 4 个系数导致我产生了难以理解的形式和伪影。
你能帮我渲染一下吗?也欢迎建议用另一种方法渲染它。
谢谢!