麒麟v10 上部署 TiDB v5.1.2 生产环境优化实践
737
2023-05-01
***集群和实战详解
1.概述
最近有同学和网友私信我,问我***方面的问题;这里我整理一篇博客来赘述下***供大家学习参考,博客的目录内容如下:
基本操作CRUDMapReduce
本篇文章是基于***集群(Sharding+Replica Sets)上演示的,故操作的内容都是集群层面的,所以有些命令和单独的使用***库有异样。
2.基本操作
常用的 Shell 命令如下所示:
db.help() # 数据库帮助 db.collections.help() # 集合帮助 rs.help() # help on replica set show dbs # 展示数据库名 show collections # 展示collections在当前库 use db_name # 选择数据库
查看集合基本信息,内容如下所示:
#查看帮助 db.yourColl.help(); #查询当前集合的数据条数 db.yourColl.count(); #查看数据空间大小 db.userInfo.dataSize(); #得到当前聚集集合所在的 db db.userInfo.getDB(); #得到当前聚集的状态 db.userInfo.stats(); #得到聚集集合总大小 db.userInfo.totalSize(); #聚集集合储存空间大小 db.userInfo.storageSize(); #Shard版本信息 db.userInfo.getShardVersion() #聚集集合重命名,将userInfo重命名为users db.userInfo.renameCollection("users"); #删除当前聚集集合 db.userInfo.drop();
3.CRUD
3.1创建
在集群中,我们增加一个 friends 库,命令如下所示:
db.runCommand({enablesharding:"friends"});
在库新建后,我们在该库下创建一个user分片,命令如下:
db.runCommand( { shardcollection : "friends. user"});
3.2新增
在***中,save和insert都能达到新增的效果。但是这两者是有区别的,在save函数中,如果原来的对象不存在,那他们都可以向collection里插入数据;如果已经存在,save会调用update更新里面的记录,而insert则会忽略操作。
另外,在insert中可以一次性插叙一个列表,而不用遍历,效率高,save则需要遍历列表,一个个插入,下面我们可以看下两个函数的原型,通过函数原型我们可以看出,对于远程调用来说,是一次性将整个列表post过来让***去处理,效率会高些。
Save函数原型如下所示:
Insert函数原型(部分代码)如下所示:
3.3查询
3.3.1查询所有记录
db. user.find();
默认每页显示20条记录,当显示不下的情况下,可以用it迭代命令查询下一页数据。注意:键入it命令不能带“;” 但是你可以设置每页显示数据的大小,用DBQuery.shellBatchSize= 50;这样每页就显示50条记录了。
3.3.2查询去掉后的当前聚集集合中的某列的重复数据
db. user.distinct("name"); #会过滤掉name中的相同数据 相当于: select distict name from user;
3.3.3查询等于条件数据
db.user.find({"age": 24}); #相当于: select * from user where age = 24;
3.3.4查询大于条件数据
db.user.find({age: {$gt: 24}}); # 相当于: select * from user where age >24;
3.3.5查询小于条件数据
db.user.find({age: {$lt: 24}}); #相当于: select * from user where age < 24;
3.3.6查询大于等于条件数据
db.user.find({age: {$gte: 24}}); #相当于: select * from user where age >= 24;
3.3.7查询小于等于条件数据
db.user.find({age: {$lte: 24}}); #相当于: select * from user where age <= 24;
3.3.8查询AND和OR条件数据
AND
db.user.find({age: {$gte: 23, $lte: 26}}); #相当于 select * from user where age >=23 and age <= 26;
OR
db.user.find({$or: [{age: 22}, {age: 25}]}); #相当于: select * from user where age = 22 or age = 25;
3.3.9模糊查询
db.user.find({name: /mongo/}); #相当于%% select * from user where name like '%mongo%';
3.3.10开头匹配
db.user.find({name: /^mongo/}); # 与SQL中得like语法类似 select * from user where name like 'mongo%';
3.3.11指定列查询
db.user.find({}, {name: 1, age: 1}); #相当于: select name, age from user;
当然name也可以用true或false,当用ture的情况下和name:1效果一样,如果用false就是排除name,显示name以外的列信息。
3.3.12指定列查询+条件查询
db.user.find({age: {$gt: 25}}, {name: 1, age: 1}); #相当于: select name, age from user where age > 25; db.user.find({name: 'zhangsan', age: 22}); #相当于: select * from user where name = 'zhangsan' and age = 22;
3.3.13排序
#升序: db.user.find().sort({age: 1}); #降序: db.user.find().sort({age: -1});
3.3.14查询5条数据
db.user.find().limit(5); #相当于: select * from user limit 5;
3.3.15N条以后数据
db.user.find().skip(10); #相当于: select * from user where id not in ( select * from user limit 5 );
3.3.16在一定区域内查询记录
#查询在5~10之间的数据 db.user.find().limit(10).skip(5);
可用于分页,limit是pageSize,skip是第几页*pageSize。
3.3.17COUNT
db.user.find({age: {$gte: 25}}).count(); #相当于: select count(*) from user where age >= 20;
3.3.18安装结果集排序
db.userInfo.find({sex: {$exists: true}}).sort();
3.3.19不等于NULL
db.user.find({sex: {$ne: null}}) #相当于: select * from user where sex not null;
3.4索引
创建索引,并指定主键字段,命令内容如下所示:
db.epd_favorites_folder.ensureIndex({"id":1},{"unique":true,"dropDups":true}) db.epd_focus.ensureIndex({"id":1},{"unique":true,"dropDups":true})
3.5更新
update命令格式,如下所示:
db.collection.update(criteria,objNew,upsert,multi)
参数说明: criteria:
查询条件 objNew:update对象和一些更新操作符
upsert:如果不存在update的记录,是否插入objNew这个新的文档,true为插入,默认为false,不插入。
multi:默认是false,只更新找到的***条记录。如果为true,把按条件查询出来的记录全部更新。
下面给出一个示例,更新id为 1 中 price 的值,内容如下所示:
db. user.update({id: 1},{$set:{price:2}}); #相当于: update user set price=2 where id=1;
3.6删除
3.6.1删除指定记录
db. user. remove( { id:1 } ); #相当于: delete from user where id=1;
3.6.2删除所有记录
db. user. remove( { } ); #相当于: delete from user;
3.6.3DROP
db. user. drop(); #相当于: drop table user;
4.MapReduce
***中的 MapReduce 是编写JavaScript脚本,然后由***去解析执行对应的脚本,下面给出 Java API 操作MR。代码如下所示:
MongdbManager类,用来初始化***:
***Factory类,用来封装操作业务代码,具体内容如下所示:
LoginerAmountMR类,这是一个统计登录用户数的MapReduce计算类,代码如下:
5.总结
在计算 *** 的MapReduce计算的时候,拼接JavaScript字符串时需要谨慎小心,很容易出错,上面给出的代码只是一部分代码,供参考学习使用;另外,若是要做MapReduce任务计算,推荐使用Hadoop的MapReduce计算框架,***的MapReduce框架这里仅做介绍学习了解。
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。