teradata数据仓库性能优化的研究

《teradata数据仓库性能优化的研究》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、上海交通大学硕士学位论文Teradata数据仓库性能优化的研究姓名：许毅申请学位级别：硕士专业：计算机技术指导教师：姚天昉;汤沛源20090401上海交通大学工程硕士学位论文摘要Teradata数据仓库性能优化的研究摘要Teradata数据仓库是全球数据仓库的先驱，具有20年以上商业智能应用的历史，其业务遍布全球六十多个国家，是目前金融行业对海量数据进行数据挖掘和辅助决策的首选。本文通过对Teradata数据仓库数据存储机制和数据访问机制的研究和分析，特别是针对性能优化问题，运用了优化索引的方法，提出了一种运用两重索引、分区主索引和特殊索引的优化方案，并结合在线查询实例，采用了实验的

2、方法进行验证。实验的验证结果表明本文提出的优化方案是实用而且有效的。在影响性能的机制方面，论文重点分析了Teradata的并行处理机制，数据分配和数据访问机制。阐述了数据分配要尽量均匀，数据访问要尽量基于索引进行。在提高查询速度方面，论文重点研究了3种优化方案。1．从一重索引到主次索引即两重索引的优化。使得客户的查询需求能够更多的基于索引进行。2.从非分区主索引到分区主索引的优化。使得一类查询只需要访问一个大表的一部分。3.使用特殊索引的优化。使得不同的索引可以在不同的查询语义下获得更好的优化效果。在实际应用实例方面，论文着重分析了Teradata数据仓库应对在线查询的弊端。根据大量

3、的实验测试结果，提出了针对每一个在线查询做一个“量身定做”的数据表，以适应并发量大，响应快的在线查询应用。本文研究工作的意义在于：使得Teradata数据仓库对海量数据的查询速度更快，并能够适用并发量大、实时响应块的在线查询应用。关键词：索引，非分区主索引，分区主索引，按值排序索引，多表连接索引，单表连接索引，聚合索引，在线查询I上海交通大学工程硕士学位论文ABSTRACTAStudyofthePerformanceOptimizationforTeradataWarehouseABSTRACTTeradatadatawarehouseisapreferredonefordatami

4、ninganddecision-makingwithhugeamountofdataonfinanceindustry.ThepaperfocusesonanalyzingmechanismsofTeradata'sdatadistributionanddataaccess,andfindsthesolutionstooptimizetheperformanceofTeradatabyusingoptimalindexes.Theoptimalsolutionsaredescribedasfollows:1.Theoptimizationfromoneindextotwoindexe

5、s.Twoindexeshavebetterperformanceindatadistributionanddataaccess.2.TheoptimizationfromNon-PartitionedPrimaryIndexestoPartitionedPrimaryIndexes.PPIisbetterthanNPPIinrangequeries.3.Theoptimizationofspecialindexes,suchasValueOrderedIndexes,MultiTablesJoinIndexes,SingleTableJoinIndexes,AggregateInd

6、exesandsoon.Differentindexescanhavedifferentperformance.Finally,thepaperputsforwardtoa"tailored"datatableforeachon-linequery.Itcanmeettheneedsofresponsingon-linequeriesunderreal-timecondition.ThesignificanceofthepaperistomaketheTeradatadatawarehousefasterandapplicableforresponsingon-linequeries

7、underreal-timecondition.KEYWORDSPrimaryIndexes,Non-PartitionedPrimaryIndexes,PartitionedPrimaryIndexes,ValueOrderedIndexes,MultiTablesJoinIndexes,SingleTableJoinIndexes,AggregateIndexes,On-lineQueryII符号说明上海交通大学工程硕士学位论文符号说明Abbrevia