大数据时代图书馆面临的挑战机遇与对策

《大数据时代图书馆面临的挑战机遇与对策》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、大数据时代图书馆面临的挑战机遇与对策赵继海2012年11月7日＠义乌提纲引言大数据的由来大数据的特征大数据的作用大数据的挑战大数据时代图书馆的对策结束语一、引言关注、跟踪、研究热点和前沿问题，是把握未来方向，制定图书馆发展战略与对策的需要。当前图书馆的热点和前沿问题：四化一大：数字化、移动化、社会化、智能化，大数据时代来临。两个案例美国连锁超市Target案例。为何向17岁女孩发婴儿尿片和童车的优惠券？英国零售巨头Tesco（乐购）案例。通过挖掘分析会员卡用户的购物数据，对顾客分类，有针对性地发广告邮件，每年节省3.5亿英镑的广告费用。2011年5月，McKi

2、nsey发布《大数据：创新、竞争和生产力的下一个前沿》的报告，首次提出了大数据概念，认为数据已经成为经济社会发展的重要推动力。大数据是2012年IT界的热门话题。今年3月29日，美国奥巴马政府宣布推出“大数据研究和发展计划”（BigDataResearchandDevelopmentInitiative），有人将其比之为克林顿政府当年提出的“信息高速公路”计划。该计划涉及美国国家科学基金会、卫生研究院、能源部、国防部等6个联邦政府部门，投资超两亿美元，研发收集、组织和分析大数据的工具及技术。美国政府大数据计划的出笼，表明大数据技术已经上升为国家战略。二、大数据

3、的由来数字化呈现新的特征，即非结构化的数据已经成为数字资源的主体。先来看看传统纸本资源的数字化过程。到目前为止，中文的纸质图书、期刊、学位论文等文献类型，已大部完成数字化转换。报纸、灰色文献正在进行数字化转换。英文及其他文种的纸质资源正在进行大规模数字化。预计在三至五年内，人类历史上积累的纸质文献资源将基本上完成扫描和数字化。每时每刻都在产生大量的原生数字资源（Born–digitalresources）－－每个用户、每台终端都在产生信息。据IDC（国际数据公司）统计，2011年全球所产生的数据总量是1.8ZB（10的21次方），年增50%。1TB(Trill

4、ionbyte，太字节)=1024GB1PB(Petabyte，拍字节)=1024TB1EB(Exabyte，艾字节)=1024PB1ZB(Zettabyte，泽字节)=1024EB=100万PB=10亿TB各类数字资源在爆炸式增长，尤其是非结构化的数据（图片、声音、视频、地理位置信息等等），已经成为信息资源的主体。这是当前资源数字化的新特征。目前非结构化数据已占数据总量的80%以上。图书馆对于文献数据库以外的数字资源的采集、处理、保存、挖掘和服务，还没有引起足够的重视。社交网络、移动互联网、物联网、信息化应用、各类信息终端、传感器、摄像头等方面的快速发展，导

5、致数据量剧增，数据类型多样。对海量的多样化数据的存储、处理、检索提出了技术挑战。数据中蕴藏的巨大商业价值引发了对于数据处理、分析的巨大需求。这样催生了大数据的概念与相关技术。三、大数据的特征大数据的特征可概括为4个V，即海量（Volume）、多样（Variety）、快速（Velocity）和价值（Value）。大数据技术的宗旨就是从海量、多样性的数据中，快速获得有价值的信息。海量（Volume）大数据首先是数据量大。遍布世界各个角落的电脑、传感器、移动设备、在线交易和社交网络每时每刻都在产生大量数据。大数据遍及各行各业。企业、机构甚至个人的活动都在产生和积累大

6、量数据。多样（Variety）大数据的数据类型非常多。除了图书馆界熟悉的文献类型外，更多的是网络日志、视频、声频、图片、地理位置信息、交易信息、科学数据集等等。除了结构化数据外，非结构化数据占到了很大比重。目前非结构化数据已占数据总量的80%以上。随着非结构化数据的比重越来越大，其中蕴含着巨大的商业价值和社会价值，对传统的数据分析处理算法和软件提出了挑战。快速（Velocity）处理多样化的海量数据，对速度的要求很高。对大数据快速处理，才能了解迅速变化的环境并作出反应，才能快速制定出合理准确的应对策略。对大数据的快速处理分析，将为企业实时洞察市场变化、迅速采取

7、对应措施、把握市场先机提供决策支持。价值（Value）价值是大数据的终极意义所在。数据正成为新型资产，“数据价值化”将成为企业提高竞争力的下一个关键点。大数据的价值虽然巨大，价值密度却很低（如监控视频），往往需要对海量的数据进行挖掘分析才能得到真正有用的信息，从而形成用户价值。大数据将是下一个社会发展阶段的“石油”和“金矿”。无论是个人、企业还是国家，谁能更好地抓住数据、理解数据、分析数据，谁就能在下一波的社会竞争中脱颖而出。关于数据的知识，将成为个人知识结构中的必备要素和基础。——施伯乐（复旦大学计算机研究所所长）四、大数据的作用大数据将对技术、经济和社会的

8、发展带来重大影响。第一，对大数据的处理