欢迎来到天天文库
浏览记录
ID:8842827
大小:70.00 KB
页数:6页
时间:2018-04-09
《探寻c最快的读取文件的方案cio优化》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库。
1、在竞赛中,遇到大数据时,往往读文件成了程序运行速度的瓶颈,需要更快的读取方式。相信几乎所有的C++学习者都在cin机器缓慢的速度上栽过跟头,于是从此以后发誓不用cin读数据。还有人说Pascal的read语句的速度是C/C++中scanf比不上的,C++选手只能干着急。难道C++真的低Pascal一等吗?答案是不言而喻的。一个进阶的方法是把数据一下子读进来,然后再转化字符串,这种方法传说中很不错,但具体如何从没试过,因此今天就索性把能想到的所有的读数据的方式都测试了一边,结果是惊人的。竞赛中读数据的情况最多的莫
2、过于读一大堆整数了,于是我写了一个程序,生成一千万个随机数到data.txt中,一共55MB。然后我写了个程序主干计算运行时间,代码如下:?[Copytoclipboard]ViewCodeCPP1234567#includeintmain(){intstart=clock();//DOSOMETHINGprintf("%.3lf",double(clock()-start)/CLOCKS_PER_SEC);}最简单的方法就算写一个循环scanf了,代码如下:?[Copytoclipboard
3、]ViewCodeCPP12345constintMAXN=10000000;intnumbers[MAXN];voidscanf_read()678910{freopen("data.txt","r",stdin);for(inti=0;i4、000;intnumbers[MAXN];voidcin_read(){freopen("data.txt","r",stdin);for(inti=0;i>numbers[i];}出乎我的意料,cin仅仅用了6.38秒,比我想象的要快。cin慢是有原因的,其实默认的时候,cin与stdin总是保持同步的,也就是说这两种方法可以混用,而不必担心文件指针混乱,同时cout和stdout也一样,两者混用不会输出顺序错乱。正因为这个兼容性的特性,导致cin有许多额外的开销,如何禁5、用这个特性呢?只需一个语句std::ios::sync_with_stdio(false);,这样就可以取消cin于stdin的同步了。程序如下:?[Copytoclipboard]ViewCodeCPP12345constintMAXN=10000000;intnumbers[MAXN];voidcin_read_nosync()67891011{freopen("data.txt","r",stdin);std::ios::sync_with_stdio(false);for(inti=0;i6、++)std::cin>>numbers[i];}取消同步后效率究竟如何?经测试运行时间锐减到了2.05秒,与scanf效率相差无几了!有了这个以后可以放心使用cin和cout了。接下来让我们测试一下读入整个文件再处理的方法,首先要写一个字符串转化为数组的函数,代码如下?[Copytoclipboard]ViewCodeCPP12345678910111213constintMAXS=60*1024*1024;charbuf[MAXS];voidanalyse(char*buf,intlen=MAXS){int7、i;numbers[i=0]=0;for(char*p=buf;*p&&p-buf8、buf[MAXS];voidfread_analyse(){freopen("data.txt","rb",stdin);intlen=fread(buf,1,MAXS,stdin);buf[len]=' ';analyse(buf,len);}上述代码有着惊人的效率,经测试读取这10000000个数只用了0.29秒,效率提高了几乎10倍!掌握着种方法简直无敌了,不过,我记得frea
4、000;intnumbers[MAXN];voidcin_read(){freopen("data.txt","r",stdin);for(inti=0;i>numbers[i];}出乎我的意料,cin仅仅用了6.38秒,比我想象的要快。cin慢是有原因的,其实默认的时候,cin与stdin总是保持同步的,也就是说这两种方法可以混用,而不必担心文件指针混乱,同时cout和stdout也一样,两者混用不会输出顺序错乱。正因为这个兼容性的特性,导致cin有许多额外的开销,如何禁
5、用这个特性呢?只需一个语句std::ios::sync_with_stdio(false);,这样就可以取消cin于stdin的同步了。程序如下:?[Copytoclipboard]ViewCodeCPP12345constintMAXN=10000000;intnumbers[MAXN];voidcin_read_nosync()67891011{freopen("data.txt","r",stdin);std::ios::sync_with_stdio(false);for(inti=0;i6、++)std::cin>>numbers[i];}取消同步后效率究竟如何?经测试运行时间锐减到了2.05秒,与scanf效率相差无几了!有了这个以后可以放心使用cin和cout了。接下来让我们测试一下读入整个文件再处理的方法,首先要写一个字符串转化为数组的函数,代码如下?[Copytoclipboard]ViewCodeCPP12345678910111213constintMAXS=60*1024*1024;charbuf[MAXS];voidanalyse(char*buf,intlen=MAXS){int7、i;numbers[i=0]=0;for(char*p=buf;*p&&p-buf8、buf[MAXS];voidfread_analyse(){freopen("data.txt","rb",stdin);intlen=fread(buf,1,MAXS,stdin);buf[len]=' ';analyse(buf,len);}上述代码有着惊人的效率,经测试读取这10000000个数只用了0.29秒,效率提高了几乎10倍!掌握着种方法简直无敌了,不过,我记得frea
6、++)std::cin>>numbers[i];}取消同步后效率究竟如何?经测试运行时间锐减到了2.05秒,与scanf效率相差无几了!有了这个以后可以放心使用cin和cout了。接下来让我们测试一下读入整个文件再处理的方法,首先要写一个字符串转化为数组的函数,代码如下?[Copytoclipboard]ViewCodeCPP12345678910111213constintMAXS=60*1024*1024;charbuf[MAXS];voidanalyse(char*buf,intlen=MAXS){int
7、i;numbers[i=0]=0;for(char*p=buf;*p&&p-buf8、buf[MAXS];voidfread_analyse(){freopen("data.txt","rb",stdin);intlen=fread(buf,1,MAXS,stdin);buf[len]=' ';analyse(buf,len);}上述代码有着惊人的效率,经测试读取这10000000个数只用了0.29秒,效率提高了几乎10倍!掌握着种方法简直无敌了,不过,我记得frea
8、buf[MAXS];voidfread_analyse(){freopen("data.txt","rb",stdin);intlen=fread(buf,1,MAXS,stdin);buf[len]=' ';analyse(buf,len);}上述代码有着惊人的效率,经测试读取这10000000个数只用了0.29秒,效率提高了几乎10倍!掌握着种方法简直无敌了,不过,我记得frea
此文档下载收益归作者所有