一种基于海量信息处理的云存储模型研究_张桂刚

一种基于海量信息处理的云存储模型研究_张桂刚

计算机研究与发展

JournalofComuterResearchandDevelomentISSN10001239CN111777TP -? -?

():49Sul.326,20123一种基于海量信息处理的云存储模型研究

张桂刚 李 超 张 勇 邢春晓

()清华大学信息技术研究院 北京 100084()清华大学信息科学国家实验室 北京 100084)(uianail.tsinhua.edu.cn@mgggg

AKindofCloudStoraeModelResearchBasedonMassiveInformation          g

Processing

,,,ZhanGuianLiChaoZhanYonandXinChunxiao  gggggg   

()ResearchInstituteoInormation TechnoloTsinhua UniversitBeiin00084  ffgy,gy,jg1 

()orTsinhua NationalLaboratorInormationScienceand TechnoloTsinhua UniversitBeiin00084    fgy fgy,gy,jg1

Abstracthisakindofcloudstoraemodelbasedonmassiveinformationaerresentsrocessin. T             gppppg

:),Themodelincludes1storaemethodsofstructuredsemistructuredandunstructureddataandthe     -     g;2)resourcesTHDFS(TsinHuaDistributedFileSstem)whichwilltakeintocorresondin      gypg  

();allsizeofthemassivedatafilesbifilesandsmallfiles3)aclouddatabasesstemdesinaccount              gyg ;4)modelrocessinTHCloudDB(TsinHuaCloudDatabase)ainternetbasemassivedata    -   pgg 

)comutationmodelTHMaReduce(TsinHuaMaReducecomutationmodelbasedonhadoo       ppgppp++ 

whichisstronerthanMaReduceandweakerthanSQL,eseciallithavemeredintothesemantic             gppyg ;)technolo5)aintellientminintoolTHBI(TsinHuaBusinessIntellientbasedoncomutin      gyggggpg   

,theTHDFSandTHCloudDB,andithavethesemanticfunctions.Finallaerendtakes“Tsinhua         yppg”asacaseandmakesomeanalsisaboutthemodelsalications.Ton          yppg

;m;Kewords cloudstoraeassiveinformationrocessindistributedfilesstem;clouddatabase      gpgyy sstemy

该模型包括:结构化、半结构化及摘 要 提出了一种云环境下海量数据组织与资源共享的存储总模型,

能兼顾海量大小数据文件处理的分布式文件系统THD云其非结构化数据与资源的对应存储方法;FS;云环境下强于M以H数据库系统设计模型THCloudDB;aReduce弱于SQL,adoopp++为基础的一种

;针对互联网海量数据文件处理且具有语义计算效能的计算模型THM针对THDaReduceFS及其p;最后以“清华通”为案例分析了该模型平台的THCloudDB的具有语义效能的智能挖掘分析工具THBI具体应用.

海量信息处理;分布式文件系统;云数据库系统关键词 云存储;

中图法分类号 TP391.41

越来越多的数据  随着云计算技术的飞速发展,

密集型企业相继出现.面临着这些海量的数据信息,

--20120104 收稿日期:

包括结构化信息、半结构化信息及其非结构化信息,如何存储并对这些信息进行处理将是这些企业面临

);;国家“九七三”重点基础研究计划基金项目(国家自然科学基金项目(湖北省教育厅22011CB30230260873007)011年度人文社 基金项目:

);)会科学研究项目(湖北经济学院青年科研基金项目(2011t055XJ201118jyq

相关文档
一种基于海量信息处理的云存储模型研究
计算机研究与发展JournalofComputerResearchandDevelopment ISSN. 1000—1239/CN11—1777/TP49(Suppl.):32—36,2012 一种基于海量信息处理的云存储模型研究张桂刚 李...
2011年第17届全国信息存储技术大会(IST2011) -会议日程
一种基于海量信息处理的云存储模型研究 一种分布式存储系统磁盘配额的实现 一种...作者陈兰香 许力 文中领 张海涛 张勇 张桂刚 李超 王力 马宏远 王斌 陈起...
I一种构造用例模型的方法研究
01 — 0095 - 04 一种构造用例模型的方法研究王 ...说明工具 ,对业务流程图中的每个处理加以进一步 绘制...[7 ]张昭玉 ,张桂刚 1 基于用例的软件需求建模...
数字档案信息安全
[17] 张桂刚 ,李超 ,张勇 ,邢春晓 .一种基于海量信息处理的云存储 模型研究[J].计算机研究与发展,2012,v.49S1:32~36. [18]吴家亮.安全领域中云存储...
一种大数据放置方法
一种大数据放置方法张桂刚 (清华大学信息技术研究院...及提升MapReduce处理Join连接的效率的大数据放置模型...1)盲目采购大量的机器搭建数据中心,而实际上只存储...
一种大数据放置方法
一种大数据放置方法张桂刚 ()) 清华大学信息技术...研究了大数据的放置模型。 影响大数据放置的因素主要...而实际上只 存储了极1 少的数据和进行极少量的数据...
I一种构造用例模型的方法研究
01 — 0095 - 04 一种构造用例模型的方法研究王 ...说明工具 ,对业务流程图中的每个处理加以进一步 绘制...[7 ]张昭玉 ,张桂刚 1 基于用例的软件需求建模...
相关主题
热门文档