php大数据(7百万级)操作结果记录

2018-08-04 03:21:48
Reading:407

在项目中,需要对7百多万的数据中的内容进行批量的局部增删替换操作,以下是操作过程中对数量和时间的记录。

//200000条记录被处理。执行时间:180.414秒($uPageSize=1000;$x<200;0)=200/10=20w,3分钟,6.6w条/分
//800000条记录被处理。执行时间:732.758秒($uPageSize=1000;$x<1000;199)=800/10=80w,12分钟,6.6w条/分
//1000000条记录被处理。执行时间:858.567秒($uPageSize=1000;$x<2000;999)=1000/10=100w,14分钟,7w条/分
//2000000条记录被处理。执行时间:1942.879秒($uPageSize=1000;$x<4000;1999)=2000/10=200w,32分钟,6w条/分
//2000000条记录被处理。执行时间:1876.679秒($uPageSize=1000;$x<6000;3999)=2000/10=200w,31分钟,6w条/分
//1188392条记录被处理。执行时间:1559.985秒($uPageSize=1000;$x<7200;5999)=1200/10=120w,26分钟,4.6w条/分(前台同时进行其它操作)

About

When I was young
I'd listen to the radio
Waiting for my favorite songs
When they played I'd sing along
It made me smile
Those were such happy times
And not so long ago
How I wondered where they'd gone
But they're back again
Just like a long lost friend
All the songs I loved so well