Question

我在数据库中有一个表，它按时间存储日志数据。有一天，数据库中可能有一百万行。时间不是任何规律的间隔。它有几个索引，包括时间。我想要做的是构建一个查询，它将返回一组行，每个时间间隔一行。例如，我可以进行查询，每15分钟返回1行一天。这将返回24 * 60 = 96行。返回的每一行实际上是在请求的间隔之前db中最近的行（因为数据库中的数据不等于请求的间隔）。

我对如何做到这一点感到茫然。我不能只查询一组特定索引和时间间隔的所有行，因为它会将超过一千兆字节的数据加载到内存中，这太慢了。有没有有效的方法来使用SQL来做到这一点。我正在使用MySQL数据库。我愿意改变表索引/ etc ......

TIME

11:58
12:03
12:07
12:09
12:22
12:27
12:33
12:38
12:43
12:49
12:55

如果我想在12:00到1:00之间查询15分钟，我会回来的：

11:58 (nearest 12:00)
12:09 (nearest 12:15)
12:27 (nearest 12:30)
12:43 (nearest 12:45)
12:55 (nearest 1:00)

如果它更容易，我也可以将时间存储为数字（即自1970年以来的ms）。在上面的查询中，这将是900000毫秒的间隔。

Answer 1

所以，我曾想过这样的事情：

SELECT 
  MIN(timeValue)
FROM e
GROUP BY (to_seconds(timeValue) - (to_seconds(timeValue) % (60 * 5)))

..会为你做，但这只会返回整个表的MIN（timeValue）。如果秒数四舍五入到最接近的5分钟就在它自己的列中。

请参阅SQL Fiddle

编辑每个Andiry，这有效：（http://sqlfiddle.com/#!2/bb870/6）

SELECT MIN(t)
FROM e
GROUP BY to_seconds(t) DIV (60 * 5)

但这只是一行：（http://sqlfiddle.com/#!2/bb870/7）

SELECT MIN(t)
FROM e
GROUP BY to_seconds(t) - (to_seconds(t) % (60 * 5))

任何人都知道为什么？

Answer 2

我无法想到在一个查询中完成所有操作的好方法。也许其他人可以想出更好的方法，但也许你可以使用这样的东西：

$startTime = mktime(12, 0);
$endTime = mktime(13, 0);
$queries = array();
for ($i = $startTime; $i <= $endTime; $i += 900)
    $queries[] = "SELECT MAX(timeValue) FROM table1 WHERE timeValue < '". date("G:i", $i) ."'";

$query = implode("\nUNION\n", $queries);

我刚才意识到这假设您正在使用PHP。如果不是，那么只需使用生成的查询，如下所示：

SELECT MAX(timeValue) FROM table1 WHERE timeValue < '12:00'
UNION
SELECT MAX(timeValue) FROM table1 WHERE timeValue < '12:15'
UNION
SELECT MAX(timeValue) FROM table1 WHERE timeValue < '12:30'
UNION
SELECT MAX(timeValue) FROM table1 WHERE timeValue < '12:45'
UNION
SELECT MAX(timeValue) FROM table1 WHERE timeValue < '13:00'

不确定<比较是否能够100％正确地使用这些字符串值，但我绝对认为将它们切换到unix时间戳（或自1970年以来的ms，如果你需要那么多）是个好主意粒度）。我发现使用日期/时间的整数值而不是字符串更容易。

Answer 3

我认为使用函数非常简单，我没有注意到性能的重大影响，尽管游标可能会更好地执行，具体取决于时间之间有多少行。

CREATE TABLE TEST_TIMES (EventTime datetime)
-- skipping INSERTS of your times

CREATE FUNCTION fn_MyTimes ( @StartTime datetime, @EndTime datetime, @Minutes int )
    RETURNS @TimeTable TABLE (TimeValue datetime)
AS BEGIN
    DECLARE @CurrentTime datetime
    SET @CurrentTime = @StartTime
    WHILE @CurrentTime <= @EndTime
    BEGIN
        INSERT INTO @TimeTable VALUES (@CurrentTime)
        SET @CurrentTime = DATEADD(minute, @Minutes, @CurrentTime)
    END
    RETURN
END

CREATE FUNCTION fn_ClosestTime ( @CheckTime datetime )
    RETURNS datetime
AS BEGIN
    DECLARE @LowerTime datetime, @HigherTime datetime

    SELECT @LowerTime = MAX(EventTime)
    FROM TEST_TIMES
    WHERE EventTime <= @CheckTime

    SELECT @HigherTime = MAX(EventTime)
    FROM TEST_TIMES
    WHERE EventTime >= @CheckTime

    IF @LowerTime IS NULL RETURN @HigherTime -- both null?  then null
    IF @HigherTime IS NULL RETURN @LowerTime

    IF DATEDIFF(ms, @LowerTime, @CheckTime) < DATEDIFF(ms, @CheckTime, @HigherTime)
        RETURN @LowerTime
    RETURN @HigherTime
END

SELECT TimeValue, dbo.fn_ClosestTime(TimeValue) as ClosestTime
FROM fn_MyTimes('2012-05-17 12:00', '2012-05-17 13:00', 15)

结果：

TimeValue               ClosestTime
----------------------- -----------------------
2012-05-17 12:00:00.000 2012-05-17 11:58:00.000
2012-05-17 12:15:00.000 2012-05-17 12:09:00.000
2012-05-17 12:30:00.000 2012-05-17 12:27:00.000
2012-05-17 12:45:00.000 2012-05-17 12:43:00.000
2012-05-17 13:00:00.000 2012-05-17 12:55:00.000

MySQL的时间间隔SQL查询

3 个答案: