本文所说的整数问题,其实并不是MongoDB的问题,而是PHP驱动的问题:MongoDB本身有两种整数类型,分别是:32位整数和64位整数,但旧版的PHP驱动不管操作系统是32位还是64位,把所有整数都当做32位整数处理,结果导致64位整数被截断。为了在尽可能保持兼容性的前提下解决这个问题,新版PHP驱动加入了mongo.native-long选项,以期在64位操作系统中把整数都当做64位来处理,有兴趣的可参考:64-bit integers in MongoDB。
那么PHP驱动真的完全解决了整数问题么?NO!在处理group操作的时候还有BUG:
为了说明问题,我们先来生成一些测试数据:
<?php
ini_set(‘mongo.native_long’, 1);
$instance = new Mongo();
$instance = $instance->selectCollection(‘test’, ‘test’);
for ($i = 0; $i < 10; $i++) {
$instance->insert(array(
‘group_id’ => rand(1, 5),
‘count’ => rand(1, 5),
));
}
?>
下面让我们使用group操作,根据group_id分组,汇总计算count:
<?php
ini_set(‘mongo.native_long’, 1);
$instance = new Mongo();
$instance = $instance->selectCollection(‘test’, ‘test’);
$keys = array(‘group_id’ => 1);
$initial = array(‘count’ => 0);
$reduce = ‘
function(obj, prev) {
prev.count += obj.count;
}
‘;
$result = $instance->group($keys, $initial, $reduce);
var_dump($result);
?>
结果和预想的有出入,count没有实现累加,而是变成了[object Object],目前,如果必须使用group操作,那么有两种方法可以缓解这个问题:
方法一:
ini_set(‘mongo.native_long’, 0);
方法二:
$initial = array(‘count’ => (float)0);
这两种方法都是治标不治本的权宜之计,既然当前PHP驱动里group的实现有问题,那我们就绕开它,用其它的方式实现同样的功能,这个方式就是MapReduce:
<?php
ini_set(‘mongo.native_long’, 1);
$instance = new Mongo();
$instance = $instance->selectDB(‘test’);
$map = ‘
function() {
emit(this.group_id, this.count);
}
‘;
$reduce = ‘
function(key, values) {
var sum = 0;
for (var index in values) {
sum += values[index];
}
return sum;
}
‘;
$result = $instance->command(array(
‘mapreduce’ => ‘test’,
‘out’ => ‘name’,
‘map’ => $map,
‘reduce’ => $reduce
));
$result = iterator_to_array($instance->{$result[‘result’]}->find());
var_dump($result);
?>
说明:虽然从表面上看MapReduce要生成一个新的Collection,显得有些低效,但我们可以定期预生成它,相当于维护一个缓存表,只要对实时性要求不太高就没问题。
把大象放冰箱里需要三步,而使用MapReduce仅仅需要Map和Reduce两步即可,这里有一个PDF文档生动的说明了MySQL中GROUP BY和MongoDB中MapReduce的对应关系:
SQL to MongoDB
此外,还有很多资料可供参考,如:MongoDB Aggregation III: Map-Reduce Basics。
说明:软件版本为MongoDB(1.6.5),PECL Mongo(1.1.4)。不同版本结论可能不同。
我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。
我原创,你原创,我们的内容世界才会更加精彩!
【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】
微信公众号
TechTarget
官方微博
TechTarget中国
作者
相关推荐
-
MongoDB与Cassandra数据库对比
MongoDB和Cassandra都属于NoSQL数据库系列,它们也恰好都是开源,但是,它们的相似之处仅此而已 […]
-
eHarmony公司利用Redis NoSQL数据库进行热存储
虽然关系型数据库不会消失,但关系型数据库管理系统有时仅在会话管理、推荐引擎和模式匹配等关键Web应用程序中担当 […]
-
2017年1月数据库流行度排行榜 新年新气象
新年新气象,数据库知识网站DB-engines最近更新了2017年1月份数据库流行度榜单。TechTarget数据库网站将与您分享1月份的榜单排名情况,让我们拭目以待。
-
2016年12月数据库流行度排行榜 几家欢乐几家愁
在过去的6个月中,数据库排行榜的前二十名总体上没有太大的变动,那么数据库知识网站DB-engines最近更新的2016年12月份数据库流行度排名情况是否一如既往的沉寂、低调呢?