多级MongoDB小组

时间:2015-01-20 15:54:19

标签: mongodb mapreduce mongodb-query aggregation-framework

我有一组事件数据,我希望执行聚合/分组,将事件数据汇总到一个结果中。我遇到的问题就是如何以我想要返回结果的方式组织数据。

示例数据:

db.events.find({})

{
    eventId : "abc",
    eventDate : 1420088400000,
    eventLength : 1800000,
    eventStart : 59100000,
    attendees : [
        "userA",
        "userB",
        "userC"
    ],
    otherData : "...",
    etc : "..."
},{
    eventId : "def",
    eventDate : 1421557200000,
    eventLength : 3600000,
    eventStart : 36000000,
    attendees : [
        "userA",
        "userG",
        "userZ"
    ],
    otherData : "...",
    etc : "..."
},{
    eventId : "ghi",
    eventDate : 1420088400000,
    eventLength : 7200000,
    eventStart : 45000000,
    attendees : [
        "userD",
        "userE",
        "userA"
    ],
    otherData : "...",
    etc : "..."
}

基本上,日期&时间&#和/长度都存储为long或int表示毫秒,因此添加eventDate + eventStart会以UTC为单位提供日期和开始时间。添加eventDate + eventStart + eventLength会以UTC格式提供事件结束时间。

我尝试做的是创建和聚合,允许我在与会者的userId上匹配(这里没有概率),但按日/周/月/年/整体显示数据分组

因此,样本结果将是例如(并且这不是上面的示例数据中的时间准确,但是正在寻找如何编写此分组的脚本..)

{
    userId : "userA",
    req : 75.0,
    totals : [
        {
            period : "day",
            events : 2,              //this means two event for today
            eventsLength : 7200000,  //$sum of the 2 events length
        },{
            period : "week",
            events : 3,              //this means 3 events in the week
            eventsLength : 9600000,  //$sum of the 3 events length
        },{
            period : "month",
            events : 8,              //this means 8 events in the month
            eventsLength : 15000000, //$sum of the 8 events length
        },{
            period : "year",
            events : 15,             //this means 15 events in the year
            eventsLength : 15000000, //$sum of the 15 events length
        },{
            period : "overall",
            events : 23,             //this means 23 events lifetime
            eventsLength : 72000000, //$sum of the 23 events length
        }
    ]
}

所以对于每个"时期"我基本上想要保持运行总计和$总结eventLength和事件数量。 " req"意味着给定当前日期,用户已完成3/4事件(75%)。它与总数无关,基本上只有一个百分比可以说目标是每周4个事件,而且这是你完成的百分比。所以你在"周"期间,他们只有4个中的3个作为目标。

在我的聚合中,我尝试了$ match,$ project和$ group的组合来尝试制作此输出,但我希望有人可以帮助分组运行总计..​​

我有给出当前日期的每个时期计算出的日期/毫秒数,所以我已经预先确定了变量,我只是不知道如何构建聚合/分组来产生这个结果.. < / p>

任何帮助表示赞赏!

1 个答案:

答案 0 :(得分:0)

昨天稍微弄乱了这个问题后,我有这个解决方案,它不是我正在寻找的确切输出,我在每个&#34;期间&#34;或者数组元素作为总计总计的集合,但是这会输出一个集合,按照&#34;句点(日/周/月/年/总体)&#34;进行分段,每个累计总计数。

{
    $match: {userId : "ABC123"}
},{
    $project : {
    _id : 0,
    d : {$cond:{if:{$and:[{$gte:["$eventDate", "${dayStart}"]},{$lte:["$eventDate", "${dayEnd}"]}]}, 
        then: {d : "$eventLength", c : {"$literal" : 1}}, 
        else: null }
    },
    w : {$cond:{if:{$and:[{$gte:["$eventDate","${weekStart}"]},{$lte:["$eventDate", "${weekEnd}"]}]}, 
        then: {d : "$eventLength", c : {"$literal" : 1}}, 
        else: null }
    },
    m : {$cond:{if:{$and:[{$gte:["$eventDate","${monthStart}"]},{$lte:["$eventDate","${monthEnd}"]}]}, 
        then: {d : "$eventLength", c : {"$literal" : 1}}, 
        else: null }
    },
    y : {$cond:{if:{$and:[{$gte:["$eventDate","${yearStart}"]},{$lte:["$eventDate","${yearEnd}"]}]}, 
        then: {d : "$eventLength", c : {"$literal" : 1}}, 
        else: null }
    },
    o : {$cond:{if:{$lte:["$eventDate","${yearEnd}"]}, 
        then: {d : "$eventLength", c : {"$literal" : 1}}, 
        else: null }
    }
}
},{
$group : {
    _id : null,
    day_d : {$sum : "$d.d"},
    day_c : {$sum : "$d.c"},
    week_d : {$sum : "$w.d"},
    week_c : {$sum : "$w.c"},
    month_d : {$sum : "$m.d"},
    month_c : {$sum : "$m.c"},
    year_d : {$sum : "$y.d"},
    year_c : {$sum : "$y.c"},
    over_d : {$sum : "$o.d"},
    over_c : {$sum : "$o.c"}
} 
},{
$project : {
    _id : 0,
    day : {events : "$day_c", millisTotal : "$day_d"},
    week : {events : "$week_c", millisTotal : "$week_d"},
    month : {events : "$month_c", millisTotal : "$month_d"},
    year : {events : "$year_c", millisTotal : "$year_d"},
    overall : {events : "$over_c", millisTotal : "$over_d"},
    req : {
        $cond : { 
            if : { $gte : ["$week_c", 4]}, then : 100, 
            else : {
                $cond : {
                    if : { $eq : ["$week_c", 3] }, then : 75,
                    else : {
                        $cond : {
                            if : { $eq : ["$week_c", 2] }, then : 50,
                            else : {
                                $cond : {
                                    if : { $eq : ["$week_c", 1] }, then : 25,
                                    else : 0
                                }
                            }
                        }
                    }
                }
            }
        }
    }
}
} 

这会生成一个看起来像这样的输出。

{
day : {
    events : 1,
    millisTotal : 7200000
},
week : {
    events : 2,
    millisTotal : 14400000
},
month : {
    events : 17,
    millisTotal : 87345000
},
year : {
    events : 17,
    millisTotal : 87345000
},
overall : {
    events : 18,
    millisTotal : 92745000
},
req : 50
}

我注意到的一件事是几乎不可能将$项目投射回数组元素,这样我就可以得到一个&#34;总计:[]&#34;将每个句点集合作为一个数组元素,但这现在适用..如果有人有反馈或更好的方法来实现这一点,我会稍微开放一下,看看是否有更好的答案。我之所以将其视为一个总计数组,那么使用此输出的逻辑可能更具动态性,而不是指望一组特定的&#34;键&#34;作为日/周/月/年/整体。