2

我有一个包含date类型字段的大表datetime。作为将两个列表作为输入的函数的一部分，datetime即一个列表，afroms我atos想为这些afrom,ato对中的每一对计算日期在它们之间的大表的所有行。

我想出了一种不太有效的方法来做到这一点，即它有一个严重的可扩展性缺陷：

/ t1 contains my afrom,ato pairs 
q)t1:([] afrom:`datetime$(2017.10.01T10:00:00.000 2017.10.02T10:00:00.000);ato:`datetime$(2017.10.01T12:00:00.000 2017.10.02T12:00:00.000));
q)t1
afrom                   ato                    
-----------------------------------------------
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000
2017.10.02T10:00:00.000 2017.10.02T12:00:00.000

/ t2 contains my very very large dataset  
q)t2:([] date:`datetime$(2017.10.01T10:01:00.000 2017.10.01T10:02:00.000 2017.10.01T10:03:00.000 2017.10.02T10:01:00.000 2017.10.02T10:02:00.000 2017.10.02T10:03:00.000); ccypair:(3#`EURUSD),(3#`USDCHF); mid:6?1.05);
q)t2
date                    ccypair mid                 
----------------------------------------------------
2017.10.01T10:01:00.000 EURUSD  0.24256133290473372 
2017.10.01T10:02:00.000 EURUSD  0.091602176288142809
2017.10.01T10:03:00.000 EURUSD  0.10756538207642735 
2017.10.02T10:01:00.000 USDCHF  0.91046513157198206 
2017.10.02T10:02:00.000 USDCHF  0.76424539103172717 
2017.10.02T10:03:00.000 USDCHF  0.17090452200500295

然后我可以cross这样使用：

select from (t1 cross t2) where afrom<date,date<ato

这会产生正确的结果：

afrom                   ato                     date                    ccypa..
-----------------------------------------------------------------------------..
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000 2017.10.01T10:01:00.000 EURUS..
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000 2017.10.01T10:02:00.000 EURUS..
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000 2017.10.01T10:03:00.000 EURUS..
2017.10.02T10:00:00.000 2017.10.02T12:00:00.000 2017.10.02T10:01:00.000 USDCH..
2017.10.02T10:00:00.000 2017.10.02T12:00:00.000 2017.10.02T10:02:00.000 USDCH..
2017.10.02T10:00:00.000 2017.10.02T12:00:00.000 2017.10.02T10:03:00.000 USDCH..

但是，当我有一个大列表afroms并且atos将cross“不必要地”扩展潜在的大表t2时，它的大小t1不会很好地扩展。

有一个更好的方法吗？例如，我尝试过类似的事情：

select from t2 where (exec afrom from t1)<date,date<(exec ato from t1)
error: `length

我猜我需要做一个循环，但不知道怎么做。子问题..是否有可能有一个区间元组列表，即intervals(afrom;ato)而不是分隔afroms和atos？

4

1 回答 1

1

如果我理解正确，那么一种方法是使用每一行t1并找到within每个时间范围内任何行的位置：

select from t2 where any date within/:value each t1
date                    ccypair mid
-----------------------------------------
2017.10.01T10:01:00.000 EURUSD  0.41239
2017.10.01T10:02:00.000 EURUSD  0.5429457
...

这与上面的 yoru 示例输出相同，没有afromandato列。在此示例中，选择范围内的所有值，any并且 each-right/:允许您使用多个范围。如果这对您来说不是特别好，那么您可以t1单独处理每一行：

raze{[x;y]select from x where date within value y}[t2]'[t1]

如果窗口不重叠，哪个应该起作用。

如果您需要独占，或者您可以尝试稍微修改窗口时间以确保它们被排除在外：

q)select from t2 where any date within/:value each @[t1;`afrom`ato;+;1 -1*00:00:00.001]
date                    ccypair mid
-----------------------------------------
2017.10.01T10:01:00.000 EURUSD  0.41239
2017.10.01T10:02:00.000 EURUSD  0.5429457
...

要将afrom和ato列添加到输出中，您可以将它们与选定的行交叉：

raze{[x;y]flip[1#'y]cross select from x where date within value[y]+1 -1*00:00:00.001}[t2]'[t1]
afrom                   ato                     date                    ccypair mid
-----------------------------------------------------------------------------------------
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000 2017.10.01T10:01:00.000 EURUSD  0.41239
2017.10.01T10:00:00.000 2017.10.01T12:00:00.000 2017.10.01T10:02:00.000 EURUSD  0.5429457
...
于 2017-12-06T10:32:01.733 回答