MySql 查询时间间隔数据的直方图

Question

我有一个这种类型的事件输入

event user
event start
event end
event type

插入到 MySql table，每行都以 user+start 作为主键。

我需要按时间间隔（比如分钟）计算每个时间间隔发生的事件的类型来查询直方图。类似于：

SELECT count(*) as hits FROM events 
WHERE type="browsing" 
GROUP BY time_diff("2015-1-1" AND "2015-1-2") / 60 * second

但我在 SQL 中找不到任何方法来做到这一点，除了编写代码，有什么想法吗？

示例数据

user, start, end, type
1, 2015-1-1 12:00:00, 2015-1-1 12:03:59, browsing
2, 2015-1-1 12:03:00, 2015-1-1 12:06:00, browsing
2, 2015-1-1 12:03:00, 2015-1-1 12:06:00, eating
3, 2015-1-1 12:03:00, 2015-1-1 12:08:00, browsing

结果应如下所示：

         ^
count    |
browsing |
users    |       *
         |       *  *  *  *
         | *  *  *  *  *  *  *  *
         --|--|--|--|--|--|--|--|--|--> minute
         0  1  2  3  4  5  6  7  8  9

Answer 1

您可以使用具有所需级别的分组依据来执行此操作。以下是使用您提供的数据的示例：

首先 SQL 创建 table 并填充它。这里的 ID 列不是 "needed"，但如果 table 很大或上面有索引，则建议使用。

CREATE TABLE `test`.`events` (
  `id` INT NOT NULL AUTO_INCREMENT,
  `user` INT NULL,
  `start` DATETIME NULL,
  `end` DATETIME NULL,
  `type` VARCHAR(45) NULL,
  PRIMARY KEY (`id`));

INSERT INTO events (user, start, end, type) VALUES 
(1, '2015-1-1 12:00:00', '2015-1-1 12:03:59', 'browsing'),
(2, '2015-1-1 12:03:00', '2015-1-1 12:06:00', 'browsing'),
(2, '2015-1-1 12:03:00', '2015-1-1 12:06:00', 'eating'),
(3, '2015-1-1 12:03:00', '2015-1-1 12:08:00', 'browsing');

获取持续时间分钟数与事件数的有序对列表：

然后可以使用 timestampdiff 函数轻松编写查询，如下所示：

SELECT 
    TIMESTAMPDIFF(MINUTE, start, end) as minutes,
    COUNT(*) AS numEvents
FROM
    test.events
GROUP BY TIMESTAMPDIFF(MINUTE, start, end)

输出：

minutes      numEvents
3            3
5            1

select 中的第一个参数可以是 FRAC_SECOND、SECOND、MINUTE、HOUR、DAY、WEEK、MONTH、QUARTER 或 YEAR 之一。

以下是您可以执行的更多查询示例：

按小时统计的事件数（应用保底函数）

SELECT 
    TIMESTAMPDIFF(HOUR, start, end) as hours,
    COUNT(*) AS numEvents
FROM
    test.events
GROUP BY TIMESTAMPDIFF(HOUR, start, end)

**按小时排列的事件，格式更好**

SELECT 
    CONCAT("<", TIMESTAMPDIFF(HOUR, start, end) + 1) as hours,
    COUNT(*) AS numEvents
FROM
    test.events
GROUP BY TIMESTAMPDIFF(HOUR, start, end)

您可以根据多种选项进行分组，但这绝对可以帮助您入门。大多数绘图包将允许您指定任意 x y 坐标，因此您无需担心 x 轴上的缺失值。

获取特定时间事件数量的有序对列表（用于记录）： 注意这个留作参考

现在开始提问。首先，您必须选择要用于分组的项目。例如，一项任务可能需要一分钟多的时间，因此开始和结束时间可能不同。对于所有这些示例，我都以开始时间为基础，因为那是事件实际发生的时间。

要按分钟对事件计数进行分组，您可以使用如下查询：

SELECT 
     DATE_FORMAT(start, '%M %e, %Y %h:%i %p') as minute, 
     count(*) AS numEvents 
FROM test.events 
GROUP BY YEAR(start), MONTH(start), DAYOFMONTH(start), HOUR(start), MINUTE(start);

注意这是如何按所有项目分组的，从年份开始，一直到分钟。我还将分钟显示为标签。结果输出如下所示：

minute                      numEvents
January 1, 2015 12:00 PM    1
January 1, 2015 12:03 PM    3

这是您随后可以使用 php 获取的数据，并准备由众多图形库之一显示，在 x 轴上绘制分钟列，在 y 轴上绘制 numEvents轴.

以下是您可以执行的更多查询示例：

每小时事件数

SELECT 
     DATE_FORMAT(start, '%M %e, %Y %h %p') as hour, 
     count(*) AS numEvents 
FROM test.events 
GROUP BY YEAR(start), MONTH(start), DAYOFMONTH(start), HOUR(start);

事件按日期

SELECT 
    DATE_FORMAT(start, '%M %e, %Y') as date, 
    count(*) AS numEvents 
FROM test.events 
GROUP BY YEAR(start), MONTH(start), DAYOFMONTH(start);

每月事件数

SELECT 
    DATE_FORMAT(start, '%M %Y') as date, 
    count(*) AS numEvents 
FROM test.events 
GROUP BY YEAR(start), MONTH(start);

年度事件

SELECT 
    DATE_FORMAT(start, '%Y') as date, 
    count(*) AS numEvents 
FROM test.events 
GROUP BY YEAR(start);

我还应该指出，如果您在这个 table 的起始列上有一个索引，这些查询将很快完成，即使有数亿行。

希望对您有所帮助！如果您对此有任何其他问题，请告诉我。

Answer 2

我假设您有一个包含整数的数字 table。您还有 $starttime 和 $endtime.

这是获取所需值的一种方法：

select ($starttime + interval n.n - 1 minute) as thetime, n.n as minutes,
       count(sd.user)
from numbers n left join
     sampledata sd
     on $starttime + interval n.n - 1 minute between sd.start and sd.end
where $starttime + interval n.n - 1 minute <= $endtime and
      sd.end >= $starttime and
      sd.start <= $endtime
group by n.n
order by n.n;

MySql 查询时间间隔数据的直方图

MySql query histogram for time intervals data

mysql

sql

time-series