php大数据(7百万级)操作结果记录
2018-08-04 03:21:48
Reading:695
在项目中,需要对7百多万的数据中的内容进行批量的局部增删替换操作,以下是操作过程中对数量和时间的记录。
//200000条记录被处理。执行时间:180.414秒($uPageSize=1000;$x<200;0)=200/10=20w,3分钟,6.6w条/分
//800000条记录被处理。执行时间:732.758秒($uPageSize=1000;$x<1000;199)=800/10=80w,12分钟,6.6w条/分
//1000000条记录被处理。执行时间:858.567秒($uPageSize=1000;$x<2000;999)=1000/10=100w,14分钟,7w条/分
//2000000条记录被处理。执行时间:1942.879秒($uPageSize=1000;$x<4000;1999)=2000/10=200w,32分钟,6w条/分
//2000000条记录被处理。执行时间:1876.679秒($uPageSize=1000;$x<6000;3999)=2000/10=200w,31分钟,6w条/分
//1188392条记录被处理。执行时间:1559.985秒($uPageSize=1000;$x<7200;5999)=1200/10=120w,26分钟,4.6w条/分(前台同时进行其它操作)