在mapreduce中使用二级索引时,Riak.mapValuesJson失败

时间:2013-08-06 01:02:05

标签: mapreduce riak

我有一个运行eLevelDB后端的Riak数据库,当我查询使用此map reduce时,我将所有数据作为JSON字符串返回(正如预期的那样):

{
"inputs":"TWEETS_BY_ID",
"query":[
    {"map":
        {"language":"javascript",
         "name":"Riak.mapValuesJson"
        }
    }]
}

这个查询很慢,我真的只想查询整个存储桶的一小部分。我有一个带时间戳的二级索引,所以我尝试运行这个mapreduce:

{
"inputs":
    {
        "bucket":"TWEETS_BY_ID",
        "index":"timestamp_int",
        "start":"1375736484000",
        "end":"1375736485000"
    },
"query":[
    {"map":
        {"language":"javascript",
         "name":"Riak.mapValuesJson",
         "keep":true
        }
    }
]
}

我收到此错误:

{error,{exit,{json_encode,{bad_term,{1375736484000,<<"364491348659142656">>}}},
             [{mochijson2,json_encode,2,
                          [{file,"src/mochijson2.erl"},{line,149}]},
              {mochijson2,'-json_encode_proplist/2-fun-0-',3,
                          [{file,"src/mochijson2.erl"},{line,167}]},
              {lists,foldl,3,[{file,"lists.erl"},{line,1197}]},
              {mochijson2,json_encode_proplist,2,
                          [{file,"src/mochijson2.erl"},{line,170}]},
              {mochijson2,'-json_encode_proplist/2-fun-0-',3,
                          [{file,"src/mochijson2.erl"},{line,167}]},
              {lists,foldl,3,[{file,"lists.erl"},{line,1197}]},
              {mochijson2,json_encode_proplist,2,
                          [{file,"src/mochijson2.erl"},{line,170}]},
              {mochijson2,'-json_encode_array/2-fun-0-',3,
                          [{file,"src/mochijson2.erl"},{line,157}]}]}}

我确实升级到今天发布的1.4.1并且有关于二级索引和Javascript mapreduces的错误报告,但这似乎没有改变我的错误。我甚至不确定如何开始调试这个。有什么建议吗?

1 个答案:

答案 0 :(得分:2)

您发现了一个错误。当您对当前使其与mapreduce不兼容的索引执行范围查询时,会有新行为返回匹配的术语。要解决此问题,请先获取source tar(如果您还没有)。 解压缩文件并编辑riak_kv_index.hrl中的文件riak-1.4.1/deps/riak_kv/include,更改行

          return_terms=true :: boolean(), %% Note, should be false for an equals query

          return_terms=false :: boolean(), %% Note, should be false for an equals query

要仅编译索引模块,请运行

 /usr/lib/riak/erts-5.9.1/bin/erlc -I riak-1.4.1/deps/riak_kv/include riak-1.4.1/deps/riak_kv/src/riak_index.erl

这应该为您创建一个新的riak_index.beam文件。

找到您的旧riak_index.beam,对其进行备份,将其替换为新的,停止然后启动riak。在所有节点上重复此操作,您应该重新开始工作。

相关问题