大数据技术的应用现状与展望
视点聚焦
大数据技术的应用现状与展望
廖建新
(北京邮电大学网络与交换技术国家重点实验室 北京 100876)
摘 要 :梳理 了大数据研究的4项关键技术 :“数据的采集、预处理与存储 ”、“数据 的分析与挖掘 ”、“数据 的隐
私保护 ”、“数据中心体系结构 ”,挖掘和展示 了国内外大数据研究的热点,以期对该领域 的研究有一个系统而
全面的认识。从处理平 台、分析产 品、标准化 3个方面介绍 了大数据技术应用 的现状 ,并列举 了大数据现有 的
产 品应用及各行业应用案例 。最后 ,从大数据 的分析策略、深度学习、隐私保护和数据质量几个方面揭示 了大
数据研究存在 的挑战和机遇 ,以期为后续大数据技术应用 的发展提供参考 。
关键词 :大数据 ;数据分析 ;数据挖掘 ;非结构化数据 ;隐私保护 ;并行计算 ;社交网络数据
doh10.11959/j.issn.1000—0g01.2015189
BigDataTechnology:CurrentApplicationsandProspects
LinoJianxin
(StateKeyLaboratoryofNetworkingandSwitchingTechnology,BeijingUniversityofPostsand
Telecommunications,Beijing100876,China)
Abstract:Theresearchincludescomputerscience,informationscience,managementscience,psychology,ete.Four
keytechnologiesinbig dataresearch,datacollection,preprocessingand storage,dataanalysisandmining,data
privacy protection,data centersystem structurewere discussed and the hotresearch topicsfrom domestic and
overseasresearch groupswere demonstrated in orderto havecomprehensive and systematicunderstanding ofbig
data.The application statusofbig datawas introduced from three perspectives,application platforms,relevant
productsand standardization.Meanwhile,descriptionofcurrentbusinessinbigdataandotherfieldwaspresented.
Eventually,theopportunitiesandchallengesinbigdataresearch wererevealedthroughbigdataanalysisstrategies,
privacyprotectionanddataquality,whichprovidetheguidelineforfutureresearch.
Keywords:bigdata,dataanalysis,data mining,unstructured data,privacyprotection,parallelcomputing,social
networkdata
收稿 日期 :2015—06—03;修 回日期 :2015—07—14
基金项 目:国家重点基础研 究发展计划 (“973”计划)基金资助项 目(No.2013CB329102),国家 自然科学基金资助项 目(No
NoNoNoNo.