问题标签 [real-time-data]

我在 Amazon EC2 实例上创建了一个风暴集群。我在本地环境（伪分布式环境）中测试了我的代码，它运行良好。但是当我在分布式环境中运行代码时，代码似乎不起作用。在设置集群时，我在这里是否缺少一些技术性的东西。

我可以声明主管节点没有运行螺栓，因为我检查了所有主管节点的CPU 使用率，但没有一个超过 1%，但主节点（nimbus）每次都以 100% 运行，直到代码执行完毕。

我还检查了在主管节点中运行的 Java 进程，并且“jps”没有显示我的拓扑。

注意：集群在 UI 中显示了 2 个通过 nimbus 运行的主管。这表明集群是在分布式环境中设置的。

So this are my first steps with JavaFX, I'm trying to create a simple desktop application in JavaFx which emulates a real time kind of bar chart, refreshing every second to add the portion of the bar that represents the status of every sensor (off, not working, working ok...). I have to implement some buttons/textfields/menuItems for sending information to both sensor and application.

So I'm using a method which is called from start() method just before adding the canvas to the scene, from where I invoke a TimerTask to draw the graph every second, and it works fine. With this, when I try to set this canvas in the center of a BorderPane, and add the other elements to another part of the pane, the working of them is affected by the delay of the TimerTask, even when this timerTask is supposedly executed by a different thread.

How could I separate the real time drawing from the rest of the application in different threads?? Should I use another class different from "TimerTask"??

The code is something like this:

我正在研究这个 jqplot 图表我想改变

带有来自“实时外部函数”的一些变量（ID 不是来自 DB、txt 等）。

我试过：

py

主页.html

provachart.js

视图.py

所以我用这个 url 调用我的观点： urls.py

我知道，它没有情节你......但我没有任何想法。我以为是这样的。

我已经为用户和页面设置了实时 Facebook 更新。每当用户更新他的状态时，我都会在我的服务器上收到有关更改的请求。我从 facebook post call 获得的数据如下所示。

但是当页面管理员更新其状态时，我没有接到来自 facebook 的任何电话。

我按照以下步骤获取实时 Facebook 更新。

• 订阅用户/页面以获取访问令牌的更新。

  graph.facebook.com//subscriptions?object=user&fields=feed&verify_token=&method=post&callback_url=htps://serverurl/realtime.php

• 获取订阅列表

  graph.facebook.com//订阅

从这个调用中，我得到了用户和页面数据。

我还将应用程序添加到页面选项卡，但仍未获得页面更新。谁能告诉我我错过了什么？

我有一个 Pandas 数据框，我不断地每秒添加一行数据，如下所示。

如果我继续这样做，最终我将开始遇到内存问题（每次它都会调用整个 DataFrame）。

我只需要保留 X 行数据。即操作后，它将是：

有没有一种方法可以指定最大行数，以便在添加任何后续行时，同时删除最旧的行，而无需“检查 DataFrame 的长度，如果 DataFrame 的长度 > X，删除第一行，追加新行”？

像这样，但对于 Pandas DataFrame：https ://stackoverflow.com/a/10155753/4783578

我正在开发一个 Web 应用程序，但不知道如何正确执行此操作，我已经在使用 highstock 来制作静态图表，我从 Mysql 数据库中检索温度，并使用我自己设计的 PHP 类通过使用发送数据从 json 到 javascript。我知道我想做什么是可能的，highcharts 网页中有一个 jsfiddle 示例（http://jsfiddle.net/ovhb3jp1/），但它仅绘制随机 js 生成的数据。

我的猜测是我必须制作一个 js 脚本，不断从 PHP 脚本中检索温度并将其发送到绘制图形的 highstock 脚本，对吗？我将如何编写这样的脚本？我知道很多 PHP 和 Mysql，但是我对 js 的了解很模糊，所以任何帮助都会很感激。

这是我现有的 js 脚本

这是为 $chart 变量生成 json 的类的一部分

该类的hs属性是一个加载了highstock api参数的数组，通过上面的PHP代码转换成json放入上面的js脚本中。

谢谢！

这是一个关于实时编辑大文件的概念性问题。假设我们在 Google Drive 中有一个 50 Mb 的 txt 文件，我们希望允许用户对其进行编辑。我们要求用户在开始编辑之前下载整个文件（用户将不得不等待一段时间，但这没关系）。然后用户更改 50 Mb 文本文件中的一个单词。我们如何在不上传所有 50 Mb 文本的情况下更新 Google Drive 中的文件。

我的总体目标是获取从 MS SQL 服务器获取的数据，并且我希望将数据实时导出为 JSON 格式，以便可以将数据集成到 AM Charts Dataloader 中，然后出现在前端是一个折线图，随着新信息进入 SQL Server，它会不断保持趋势。

我计划将实时信息从 MS SQL 服务器转发到前端网页。所以基本上，我将如何将数据转换为 JSON，以及如何使信息在服务器接收到新信息时实时更新？

我正在使用 Visual Studio 加载 SQL Server 数据，并从那里将 JSON 数据集成到网站。到目前为止，除了连接到 Visual Studio 2013 的 SQL Server 之外，我什么都没有。

简短版本：如何在 AWS lambda 中定期触发事件？

长版：我的情况是，我的数据库中有在特定时间内过期的事件。每当我发现某个事件已过期时，我都想运行一个函数（发送推送通知、删除行等）。我知道为每个创建的事件设置一个计时器是不切实际的，但是有没有什么东西可以每分钟扫描我的数据库或其他东西并寻找过期的事件来运行我的代码？如果没有，我的解决方案是否有替代方案？

我是 Infromatica 的新手。我正在寻找能够让我实时处理大量数据 (GB/s) 的技术，并执行以下操作：

• 实时事件过滤和分类

• 与不同应用程序的实时集成（发送警报、SMS、电子邮件）

• 无状态和有状态事件分析

• 实时数据科学（机器学习等）

我想知道 Informatica 的技术堆栈是否是不错的选择。我发现：

• Informatica PowerCenter 实时版（但这在我看来就像一些更高级的 CDC）

• Informatica RulePoint（但这看起来像一些用于启动/停止一些预定义规则或创建您自己的规则以用于警报目的的 GUI）

问题是，上述技术或 Informatica 技术堆栈中的任何其他技术是否能够进行实时事件处理和分析（包括全状态分析和数据科学的机器学习等）。如果他们有效地做到这一点。

问候！