基于SDD-1算法的分布式数据库查询优化策略的研究
分布式数据库查询优化策略研究
在集中式数据库系统中， 为减少空间的浪费和保证数据的一 致性， 要尽量减少数据的冗余， 而分布式数据库系统却希望增加数 据的冗余来提高系统的可靠性、可用性和改善系统性能。但是由于 数据的分布和冗余， 使得分布式数据库系统查询处理增加了许多 新的内容和复杂性， 因此分布式查询处理的优化ｑ’（ｔ１ｉ， Ｒ２， …， Ｒｎ）， ｔ１ｉ∈Ｒ１ ｝ ３．２ Ｓｙｓｔｅｍ Ｒ＊ 算法 Ｓｙｓｔｅｍ Ｒ＊ 算 法 是 源 于 美 国 ＣＡ 州 的 ＩＢＮ Ｓａｎ Ｊｏｓｅ Ｒｅｓｅａｒｃｈ
Ｌａｂｏｒａｔｏｒｙ 开 发 Ｓｙｓｔｅｍ Ｒ＊ 系 统 ， Ｓｙｓｔｅｍ Ｒ＊ 系 统 是 采 用 直 接 连 接 作为查询处理策略的分布式数据库系统， 其最重要的目标是提供 地 点 自 主 权 。当 每 个 地 点 既 能 控 制 由 另 一 个 地 点 上 对 其 数 据 的 访 问， 也能在不受任何其它地点限制的条件下处理自己的数据时， 也就实现了地点自主权。Ｒ＊ 系统完全实现了第一个目标。但它仅 仅是部分地实现了第二个目标。
基于半连接的分布式数据库查询优化研究
④把 ｘ 耶个字节送 到 Ｓ 在的站点 ：费用 为 Ｃ ＝ 所 船
Ｌ Ｒ 卜 —络 ｌ ［酬 — — Ｉ ［—— — 、 — ｓ Ｉ — ＿ — — 卜 —— —— —— —— — — 、 网一 ｌ
（） Ｉ （Ｓ） １ Ｙ Ｂ （） 输 兀 Ｒ （Ｓ） ２传
询 的相 应 时 闻最 短 为 标 准
有半连 接与连接的操作映射 出具有 与等连 接相同结果
的过 程
在 分 布 式 查 询 优 化 中 经 常 同 时 使 用 这 两 个 标 准 根 据 系 统 应用 的 不 同 ． 种 作 为 主 要 标 准 种 作 为 次 一 一
收 稿 日期 ：ｏ ０ ０ —２ ２１— ６ ３ 修 稿 日期 ： ０ ０ ７ ２ ２ １ －０ — ３
有 用 。 此 ． 参 与 连 接 的 数 据 或无 用 的数 据不 必 在 网 因 不
络中来 回传输
用 半 连 接 技 术 实 现 连接 操 作 的 程 序 。 即用 一 组 具
价＋ 通信代价 ． 查询执行 时使其通信 代价最省是分布式 数据库查询优 化的 目标之一 ．另一种 目标是 以每个查
（）Ｒ，：Ｒ ｏ ３ ｓ ｃ （ ） Ｒ ５ ｓ
作 的过 程 以及 执 行 代 价 ， 比较 两种 半 连 接 操 作 的执 行 代 价 评 估 ， 绍 Ｓ Ｄ－ 介 Ｄ １算 法 。 关 键 词 ： 布 式 数 据 库 ： 询 优 化 ；半 连接 操 作 分 查
０ 引 言
分布 式数据库是 把数据 分布在 不 同的站点上 ． 但 这 些 数 据 片是 建 立 在 统 一 的逻 辑 框 架 上 的 ．并 有 高 级
节 。 影 费用 为 Ｐ ； 投 Ｂ
② 把 ｘ 个字 节发 送给 Ｒ所 在站 点 ：费用 为 Ｃ＝
分布式数据库查询优化方法
【 Ｋ ｅ ｙ ｗ ｏ ｒ ｄ ｓ ］ Ｄ ｉ ｓ ｔ ｉ ｒ ｂ ｕ ｔ ｅ ｄ ｄ ａ ｔ ｂａ ａ ｓ ｅ ； Ｄ ｉ ｓ ｔ ｒ ｉ ｂ ｕ ｔ ｅ ｄ ｑ ｕ ｅ ｙ； ｒ Ｑ ｕ ｅ ｙ ｒ ｏ ｐ ｔ ｉ ｍ ｉ ｚ ａ ｔ ｉ ｏ ｎ ； Ｑ ｕ ｅ ｙ ｒ ｐ ｒ ｏ ｃ ｅ ｓ ｓ ｉ ｎ ｇ ｓ ｔ ｒ ａ ｔ ｅ ｙ； ｇ Ａ ｌ ｇ ｏ ｉ ｒ ｔ ｈ ｍ ０ 引 言
容和复杂性． 对 于一个给定的查询． 通常会有 多种可能的策略． 查询优化就是从这许 多策略 中 找 出最有效查询计划的一种处理过程。并针对分布 式数据库 系统的查询优化。 讨论 了三个典型的算法： Ｉ Ｎ ＧＲ Ｅ Ｓ算 法、 Ｓ ｙ ｓ ｔ ｅ ｍ Ｒ 算法、 Ｓ Ｄ Ｄ 一１算法 【 关键词 】 分布式数据库； 分布式查询 ； 查询优化 ； 查询 处理策略 ； 算法
近年来 ． 随 着 计 算 机 网络 和数 据 库 技 术 的 发 展 ． 对 分 布 式 数 据 库 的应用越来越广泛 ： 随着应用不断扩大， 数据 的查询也越来越 复杂 ， 对 查询的效 率要求也越来越高 ， 因此查询处理成为分布式数据库系统中 的一个关键性 的问题【 １ ｊ 。在分布式数据库中． 由于数据的分布与冗余 ． 使得查询处理中一般需要站点问的数据传递及通信费用 ． 成为查询优 化 的主要矛盾 ： 另一方面 ． 数据 的分布与冗余也增加 了查询 的并 发处 理 的可能性 ． 从而可 以缩短查询处 理的响应时间 ， 提高处理 速度。总 之． 分布式查询的规模 与优化 的因素 ． 都与集中式查询优化不同 ． 因此 许 多 数 据 库 专 家 学 者 致 力 于研 究 分 布 式 数 据 库 查 询 优 化 技 术 这 一 重 要课题 ． 并 且 己 经 在这 一领 域 作 了大 量 的 工作 ． 也 找 到 了规 律 ． 包 括 一 些大 家公认 的经典算法 ： 然 而由于分布式数据库本身 的灵活性 ， 要想 设计一个算法对于各种情况都是最优的几乎不太现实 ． 只能说设计一 个较优的优化算 法 ． 它可以解决某一类型的问题［ ２ ３ 分布式数 据库 中查 询优 化是一项复杂问题 ． 已经被证 明属 于 Ｎ Ｐ完全问题 ． 至今 都没有 得到彻底地解决 ． 里面尚有许 多问题值得研究 和探讨
分布式数据库查询策略的优化方法
分布式数据库查询策略的优化方法作者：王立峰来源：《电脑知识与技术》2014年第21期摘要：分布式数据库是数据库和计算机网络技术有机的结合，它可以将不同区域的资源进行共享，从而有效的提高工作效率。
从逻辑上讲分布式数据库是一个整体，具有冗余性和分布性，使得查询数据变得较为麻烦，因此如何优化分布式数据库的查询策略，提高其查询效率成为该文的一个研究重点。
关键词：分布式数据库；查询策略；优化方法中图分类号：TP393 文献标识码：A 文章编号：1009-3044（2014）21-4967-021 绪论从物理上来讲，分布式数据库的数据分布在计算机的各个不同站点上，这些数据是一个逻辑的整体，同由分布式数据库进行全局的管理。
分布式数据库的作用主要是存储数据和方便、快捷的查询数据，因此查询策略的优化已经成为了分布式数据库的一个核心问题。
该文主要论述了分布式数据库的查询策略以及一些有效的优化方法和提高策略。
2 分布式数据库及查询优化分析分布式数据库系统从物理上来讲是分散的，而从逻辑上来讲是一个统一的系统，它是将分布在不同站点上的逻辑单位通过计算机网络连接起来。
按照数据模型的类型，分布式数据库系统可以分为同构同质型DDBS、同构异质型DDBS以及异构型DDBS三种[1]。
同构同质型DDBS中多种数据库类型采用了同样的型号，而且数据库内的数据模型属于一个类型；同构异质型DDBS数据库内的数据模型采用的也是同一型号，但是数据库类型却不相同；异构型DDBS中的数据库类型和数据模型均不一样。
按照分布式数据库的控制系统可以将分布式数据库系统分为集中式DDBS、分散性DDBS 以及可变型DDBS。
集中式DDBS在一个节点上保存全局的控制信息，所以容易实现整个分布式系统的数据一致性；但是这一种分布式系统存在一定的单点故障，一旦存放全局控制信息的节点出现问题，整个分布式系统将不能继续使用。
分散性DDBS在每个节点上都保存了全局控制信息的一个副本，虽然这样可以保证整个分布式系统的稳定性，但是却难以保证所有节点上数据的一致性。
分布式数据库查询优化算法研究与实现的开题报告
分布式数据库查询优化算法研究与实现的开题报告摘要：分布式数据库系统具有高效、可扩展、可靠等特点，在分布式系统领域得到了广泛应用。
然而，查询优化一直是分布式数据库系统的研究重点之一。
因为分布式环境下数据分布不均导致查询速度较慢，如何优化查询成为研究的目标。
本文将从分布式数据库查询优化算法入手，通过收集和研究相关领域已有的研究成果，实现一种基于分布式环境的查询优化算法，并验证其动态适应各种情况的能力。
本文将会讨论以下问题：（1）查询优化算法的相关研究；（2）已有的分布式数据库查询优化算法，包括并行、聚合和分片等方法；（3）分布式数据库查询优化算法的实现，主要包括分布式数据分片、数据分布、数据负载均衡和动态算法优化；（4）评估所提出的算法的性能以及对比现有算法。
关键词：分布式数据库；查询优化；分片；数据负载均衡Abstract:Distributed database system has been widely used in the field of distributed systems for its features of efficiency, scalability, and reliability. However, query optimization has always been one of the research focuses of distributed database systems. Because the uneven distribution of data in a distributed environment leadsto slow query speed, optimizing queries becomes the research goal. This paper will start with the query optimization algorithm for distributed databases, and implement a query optimization algorithm based on distributed environments by collecting and studying relevant research results in the field, and verifying its ability to dynamically adapt to various situations.This paper will discuss the following issues:(1) Research on query optimization algorithms;(2) Existing distributed database query optimization algorithms, including parallel, aggregation, and sharding methods;(3) Implementation of distributed database query optimization algorithms, mainly including distributed data sharding, data distribution, data load balancing, and dynamic algorithm optimization;(4) Evaluate the performance of the proposed algorithm and compare it with existing algorithms.Keywords: Distributed database; Query optimization; Sharding; Data load balancing。
分布式数据库系统的查询优化策略
Query optimization tactics in distributed database
system
作者： 王书爱[1,2]
作者机构： [1]荆楚理工学院,湖北荆门448000;[2]武汉理工大学,武汉430070
出版物刊名： 宁波职业技术学院学报
页码： 57-59页
主题词： 分布式数据库;查询优化;查询处理策略
摘要：简要地介绍了分布式数据库系统的概念和特点,并在分析比较分布式数据库系统和集中式数据库系统查询优化目标不同特点的基础上,归纳出分布式数据库系统的查询优化目标和代价分析,进而提出查询优化的策略,并在举例中重点讨论了操作执行顺序的不同对查询性能的影响。
系统优化技术
SDD-1 算法原理上个世纪，美国计算机公司实现的SDD-1 是世界第一套分布式数据库系统，虽然在之后又出现了很多不同版本的分布式数据库系统，但大多数都是建立在此模型基础之上。
该系列的分布式数据库系统查询技术就是采用半连接操作技术，为了纪念该成果，后来人们将该系列分布式数据库中查询算法定义为分布式数据库SDD-1 查询算法，在详细介绍SDD-1 查询算法之前，先引入以下概念：定义1 设有关系R和S，半连接操作R∝S的选择因子有以下公式：其中card(πa(S))是以R和S的公共属性a对S做投影操作后的元组个数，其card(S)是关系S的元组个数。
定义2设有关系R和S，半连接操作R∝S的效益有以下公式：其中size(R)代表R的大小(以字节为单位)。
定义3 设有关系R和S，半连接操作R∝S的费用开销公式：结果为真那么称此半连接R∝S为有益半连接。
定义5 最有益半连接:在定义4 的多个有益半连接中，结果值最大的有益半连接称最有益半连接。
SDD-1 查询算法通过循环迭代获得最有益半连接，每次获得最有益半连接都减少了网络数据传输量，最后选择数据量最大的站点作为数据装备站点。
SDD-1查询算法在执行时主要分两部分：首先执行基本算法，然后执行后优化算法。
在基本算法中，首先统计各半连接的效率、收益、费用等信息，利用这些统计信息给出半连接缩减程序集，最后得出执行策略；在后优化算法中，修正基本算法得出的执行策略，使最后的执行策略更高效。
SDD-1 查询基本算法是[24,27,42]：首先根据查询语句及分布式数据库数据字典得出一个查询图G。
第一步: 对半连接静态特性表中的所有半连接进行收益值估算。
第二步：排序所有半连接的收益值，并选择该值最大的半连接执行第三步：根据第二步执行的结果更新半连接静态特性表，并重新估算收益值。
第四步：判断半连接静态特性表中所有半连接是否执行完，如执行完转第五步，如没有执行完转第二步循环执行。
分布式数据库试题及答案
数据库试题目录1. 九八年秋季试题 (5)1.1. 概念题 (5)1.1.1. 比较半连接方法和枚举法的优缺点。
(5)1.1.2. 2PL协议的基本思想。
(5)1.1.3. WAL协议的主要思想。
(5)1.1.4. SSPARC三级模式体系结构。
(6)1.1.5. 设计OID的数据结构时应考虑哪些问题。
(6)1.2. 某个大学中有若干系，且每个系有若干个班级和教研室，每个教研室有若干个教员，其中教授、副教授每个人带若干名研究生。
每个班有若干名学生，每个学生可选修若干门课程，每门课程可由若干学生选修。
完成下列各种要求： (7)1.3. 下面是某学院的一个学生档案数据库的全局模式： (9)1.3.1. 将全局模式进行分片，写出分片定义和分片条件。
(9)1.3.2. 指出各分片的类型，并画出分片树。
(9)1.3.3. 假设要求查询系号为1的所有学生的姓名和成绩，写出在全局模式上的SQL查询语句，并要求转换成相应的关系代数表示，画出全局查询树，请依次进行全局优化和分片优化，画出优化后的查询树。
要求给出优化变换过程。
(10)1.4. 设数据项x,y存放在S1场地，u,v存放在S2场地，有分布式事务T1和T2,T1在S1场地的操作为R1(x)W1(x)R1(y)W1(y),T2在S1场地的操作为R2(x)R2(y)W2(y);T1在S2场地上的操作作为R1(u)R1(v)W1(u),T2在S2场地上的操作作为W2(u)R2(v)W2(v)。
对下述2种情况，各举一种可能的局部历程（H1和H2），并说明理由。
(11)1.4.1. 局部分别是可串行化，而全局是不可串行化的 (11)1.4.2. 局部和全局都是可串行化的。
要求按照严格的2PL协议，加上适当的加锁和解锁命令，（注意，用rl(x)表示加读锁，wl(x)表示加对x加写锁，ul(x)表示解锁）121.5. 试述面向对象的数据库系统中页面服务器和对象服务器两种Client/Server体系结构的主要特点, (12)2. 九九年春季试题 (13)2.1. DBMS解决了信息处理技术中的哪些挑战？ (13)2.2. 在关系数据库应用设计中，为什么要对数据库模式进行规范化？ (13)2.3. 简述ACID特性。
一种基于多蚁群遗传算法的分布式数据库查询优化方法[发明专利]
![一种基于多蚁群遗传算法的分布式数据库查询优化方法[发明专利]](https://img.taocdn.com/s3/m/6e2d2969bf23482fb4daa58da0116c175e0e1e78.png)
(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号 (43)申请公布日 (21)申请号 201811426336.9(22)申请日 2018.11.27(71)申请人 常州市武进区半导体照明应用技术研究院地址 213164 江苏省常州市天安数码城9号楼101室(72)发明人 马锐 王鑫 苏静 濮斌 (74)专利代理机构 常州佰业腾飞专利代理事务所(普通合伙) 32231代理人 刘松(51)Int.Cl.G06F 16/2453(2019.01)G06F 16/2458(2019.01)G06N 3/00(2006.01)G06N 3/12(2006.01)(54)发明名称一种基于多蚁群遗传算法的分布式数据库查询优化方法(57)摘要本发明公开了一种基于多蚁群遗传算法的分布式数据库查询优化方法，属于互联网数据库技术领域，包括建立分布式数据库构架，对分布式数据库查询代价进行分析后，将蚁群算法升级为多蚁群算法，利用了平滑机制及多蚁群间互相学习机制来避免陷入局部最优和早熟现象,从而提高了整个算法的全局搜索能力，解决了采用多蚁群算法提高分布式数据库查询效率技术问题，本发明引入多蚁群算法，并在算法中提出了“学习算子”，让子蚁群相互学习，防止陷入局部最优，提高算法性能，让算法能够获得更好的全局最优解。
权利要求书2页 说明书5页 附图1页CN 109669957 A 2019.04.23C N 109669957A1.一种基于多蚁群遗传算法的分布式数据库查询优化方法，其特征在于：包括如下步骤：步骤1:建立分布式数据库构架，设定在分布式数据库构架中的每一个数据库均为一个点，发起数据查询的点为初始点；步骤2：从初始点开始，随机向任意一个点A发起查询，点A向另外一个任意点B发起查询；步骤3：重复执行步骤2，最终产生染色体种群；步骤4：对染色体种群进行迭代：对染色体按概率进行变异和交叉操作，在产生数个新染色体；步骤5：解码所有新染色体，将所有新染色体转换成查询路径，计算查询路径的目标函数值，以此来标定新染色体的适应度值；步骤6：根据轮盘赌法和各个新染色体的适应度值进行选择操作，生产迭代后查询路径；步骤7：重复执行步骤4到步骤6，直到结束条件得到满足，将最后产生的迭代后查询路径作为最优查询路径输出；步骤8：用最优查询路径对信息素矩阵进行初始化处理，利用遗传算法来对初始信息素分布进行有效确定；步骤9：根据多蚁群算法进行查询路径优化，其包括如下步骤：步骤S1：设置开始的点,开始的点相当于发出查询请求的点；步骤S2：按照转移概率的公式进行点的转移,同时更新路径；步骤S3：判断蚂蚁是否已完成所有目的点的搜索：如果完成搜索，则执行步骤S4；否，则继续让蚂蚁进行搜索并执行步骤S3；步骤S4：判断是否蚁群内所有的蚂蚁都已经完成：若没有，则返回步骤S1；如果蚁群内所有蚂蚁都进行了搜索，则计算得到每条路径的具体目标函数值；步骤S5：判断当前迭代数是否大于蚁群开始信息素平滑机制的迭代数：若是，则按照信息素平滑机制操作；步骤S6：判断当前迭代数是否大于蚁群间开始学习信息素的迭代数：若是，则按照学习算子规则进行操作；步骤S7：判断当前迭代数是不是符合了结束条件：如果没有符合，返回步骤S1；符合，则输出结果。
分布式数据库的查询优化算法概论
在多表连接的查询特征基础上,将粒子树形编码的分布式数 据查询方式。使用粒子群算法优化后的查询策略比原始的查询 策略的执行代价低，有效地增加了系统的查询效率。为了进一 步提升效率，又提出了多连接粒子群优化算法，该算法能够在 更复杂多连接查询优化问题中得到应用。
3.5 遗传算法 分布式数据查询时不仅要考虑数据的分布与冗余，而且 要考虑站点间的通信代价以及计算机的并行执行能力、时间成 本等。近年来，学者们把粒子群算法、人工免疫算法、人工鱼 群算法等应用于分布式数据库查询中。这些启发式算法在一定 程度上提高了分布式数据库查询优化效果。遗传算法是一种并 行、高效、全局搜索算法，在数据库查询优化过程中能够获取 与积累经验，并能够在查询过程中自适应地对搜索过程进行控 制，获得最优解。查询时遗传算法个体在求解，不断根据问题 域中的适应度值，进行选择、交叉、变异等遗传操作，找到最 优查询方案。步骤如下：①随机初始化n个个体作为初始种群， 设置w、μ、α等参数的值，对初始种群进行评价，记录最佳 个体的适应度值。②设置初始样本群为空。③判断是否需要重 新取样，若需要，转到步骤4，不需要，转到步骤6。④根据条 件采样方法进行取样，评价样本中的所有种群，标记所有比当 前种群好的种群组成种群集合J。⑤得出当前最优的变异率。 ⑥交叉、变异操作。⑦更新当前种群，并对其进行评价，记录 最佳个体的适应度值。⑧判断是否满足结束条件，若满足，结 束，不满足，则转步骤3。按照步骤3～8进行3次迭代，在进化 结束后，当前种群中的最佳个体即为要找的最优查询执行计 划，按照该查询执行计划查询，整个查询过程得到优化。
参考文献 [1] 邵佩英.分布式数据库系统及其应用[M].2版.北京:科学出版
社,2005:27. [2] 魏士伟,黄文明,康业娜,等.分布式数据库中基于半连接的查询优
分布式数据库管理系统优化研究
分布式数据库管理系统优化研究引言：现代企业面临的数据量不断增长的挑战，传统的集中式数据库管理系统已经无法满足高效、可扩展和容错的需求。
分布式数据库管理系统（Distributed Database Management System，简称DDBMS）应运而生，它将数据库分布在多个节点上，实现数据的存储和访问的分布式处理。
然而，DDBMS在设计和优化方面面临着诸多挑战。
本文将从分布式数据库设计、数据复制、查询优化和容错性等方面探讨DDBMS的优化研究。
一、分布式数据库设计1. 数据分片：在DDBMS中，数据被分成多个片段存储在不同的节点上。
合理的数据分片策略可以提高数据的访问效率和负载均衡。
一种常见的分片策略是基于哈希函数的分片，通过对数据的关键属性进行哈希运算，使得相同哈希值的数据分配到同一个节点上。
2. 数据复制：数据复制是提高系统的可用性和容错性的重要手段。
通过将数据复制到多个节点上，当某个节点发生故障时，可以快速切换到备用节点上继续提供服务。
但是，数据复制也带来了数据一致性和更新延迟的问题。
因此，需要合理的数据复制策略来平衡数据一致性和性能。
二、数据复制1. 一致性模型：在DDBMS中，维护数据的一致性是一项挑战。
一致性模型定义了数据复制的行为，可以分为强一致性模型和弱一致性模型。
强一致性模型要求所有副本上的数据保持一致，但会带来更高的延迟和更低的可用性。
而弱一致性模型放宽了数据一致性的要求，可以提高系统的可用性和性能。
根据应用的需求，选择适合的一致性模型是数据复制的关键。
2. 数据冲突解决：当多个节点同时修改同一份数据副本时，可能会产生数据冲突。
解决数据冲突的常用方法是使用冲突检测和解决机制，如版本控制和冲突检测算法。
这些机制可以帮助系统自动解决数据冲突，保证数据的一致性和完整性。
三、查询优化1. 查询分发：在DDBMS中，查询被分发到不同的节点上进行并行处理。
选择合适的查询分发策略可以提高查询性能和吞吐量。
SDD-1算法的研究与改进
SDD-1算法的研究与改进
李川
【期刊名称】《西安航空技术高等专科学校学报》
【年(卷),期】2012(030)005
【摘要】SDD-1算法是分布式数据库查询优化的一种算法，研究SDD-1算法的过程，分析SDD-1算法的优缺点，并针对该算法的不考虑最后一点传输代价的缺点提出了改进的SDD-1算法。
【总页数】3页(P68-70)
【作者】李川
【作者单位】西安电子科技大学研究生院,陕西西安710071 西安航空学院计算机工程系,陕西西安710077
【正文语种】中文
【中图分类】TP311.13
【相关文献】
1.分布式查询优化算法及对SDD-1算法的改进 [J], 刘放美;王猛
2.基于SDD-1算法的分布式数据库查询优化策略的研究 [J], 李二涛
3.SDD-1改进算法在Hive中应用 [J], 王宝进;吴淑跃;薛娟
4.基于改进Gamma和改进BP算法的人脸识别研究 [J], 李国芳;王力
5.基于改进型梯度法的客车侧翻一步碰撞算法精度改进研究 [J], 王童;陈轶嵩因版权原因，仅展示原文概要，查看原文内容请购买。
分布式数据库试题及答案
4.4.1. 找出发生故障时系统中的活动事务，确定出反做和重做事务集。 ........ 36 4.4.2. 用C或其他语言定义出数据库记录（D记录）和检查点记录（K记录）的数据结 构。 36 4.5. 设数据项x,y存放在S1场地，u,v存放在S2场地，有分布式事务T1和T2,T1在S1场 地的操作为 R1(x)W1(x)R1(y)W1(y),T2 在 S1 场地的操作为 R2(x)R2(y)W2(y);T1 在 S2 场地 上的操作作为R1(u)R1(v)W1(u),T2在S2场地上的操作作为W2(u)R2(v)W2(v)。对下述2种 情况，各举一种可能的局部历程（H1和H2） ，并说明理由 ......................... 36 4.5.1. 局部分别是可串行化，而全局是不可串行化的 ........................ 37 4.5.2. 局部和全局都是可串行化的。 ...................................... 37 4.5.3. 要求按照严格的2PL协议，加上适当的加锁和解锁命令， （注意，用rl(x)表示 加读锁，wl(x)表示加对x加写锁，ul(x)表示解锁） .......................... 37 5. 二零年秋试题 .............................................................. 38 5.1. 概念题 ............................................................. 38 5.1.1. 解释对象数据库系统中面向对象的相关概念 .......................... 38 5.1.2. 从概念上比较对象数据库模型与对象关系模型 ........................ 38 5.1.3. 利用左深树、右深树、浓密树来进行查询优化的各自特点 .............. 38 5.1.4. 试解释影响并行数据库系统中并行算法性能的三个因数 ................ 39 5.1.5. 简述用爬山算法进行查询优化的基本思想 ............................ 39 5.2. 下 面 是 某 个 公 司 一 个 人 事 关 系 数 据 库 的 全 局 模 式 ： EMP={ENO*,ENAME,POSITION,PHONE} PAY={POSITION*,SALARY} ENO 为职员号， POSITION为岗位。SALARY表示岗位对应的工资，*对应的属性表示主关键字。该公司分布 在两个场地上，其中，在场地1经常处理所有职员数据，而场地2只处理工资低于1000的 职员数据，为了节省磁盘空间和增大处理局部性： .............................. 40 5.2.1. 将以上全局关系进行分片设计，写出分片定义和分片条件。 ............ 40 5.2.2. 指出分片的类型，并画出分片树。 .................................. 40 5.2.3. 给出分配设计。 .................................................. 40 5.3. 对题二所确定的分片模式，要求查询岗位为“salesman”的所有职员的姓名和工 资，写出的在全局模式上的SQL查询语句，并要求转换成相应的关系代数表示，画出全局 查询树。假设“salesman”的工资为800元。要求给出中间转换过程。 ............. 41 5.3.1. 进行全局优化，画出优化后的全局查询树。 .......................... 41 5.3.2. 进行分片优化，画出优化后的分片查询树。 .......................... 42 5.4. 按如下给出的条件，求出半连接优化计划和执行场地，并作后优化处理 ..... 42 5.5. 下面是当一个数据库系统出现故障时，日志文件中的信息 ................. 48 5.5.1. 画出对应的事务并发执行图。 ...................................... 49 5.5.2. 找出发生故障时系统中的活动事务，确定出反做和重做事务集。 ........ 49 5.5.3. 指出需要undo的和redo的数据记录。 ................................ 49 5.6. 设数据项x,y存放在S1场地，u,v存放在S2场地，有分布式事务T1和T2。T1在S1场 地的操作为R1(x)W1(x)R1(y)W1(y)，T2在S1场地的操作为R2(x)R2(y)W2(y)；T1在S2场地 上的操作作为R1(u)R1(v)W1(u)，T2在S2场地上的操作作为W2(u)R2(v)W2(v)。对下述2种 情况，各举一种可能的局部历程（H1和H2） ，如果是可串行化的，指出事务的执行次序。 对第3种情况，给出符合基本2PL协议的调度。 （T1 加锁命令用L1(X)表示，开锁命令U1(X) 表示。对任何数据的加锁可在事务开始后立即进行） 。 ........................... 49 5.6.1. 局部是不可串行化的。 ............................................ 50 5.6.2. 局部是可串行化的，而全局是不可串行化的。 ........................ 50 5.6.3. 局部是可串行化的，全局也是可串行化的。 .......................... 51 5.7. 设计一种满足下列要求的索引结构。 ...............................象的数据库是如何产生的，其基本原理是什么？有哪些创新特性？ ... 18 r i ∝ r j 一定等于r j ∝ r i 吗？在什么条件下r i ∝ r j = r j ∝ r i 成立? ......... 18
sdd-1算法的改进及其应用研究
西安电子科技大学硕士学位论文SDD-1算法的改进及其应用研究姓名：***申请学位级别：硕士专业：计算机应用技术指导教师：***20100101摘 要作为一种分布式数据库的查询优化方法，由于其本身的局限性，SDD-1算法所生成的查询计划的通信费用并非最小，而且当连接查询涉及到的站点数目较多时，会因其生成查询计划的时间过长而导致查询效率下降。
本文针对SDD-1算法的这两个缺陷，设计了一种基于遗传算法的I-SDD-1算法。
用遗传算法求解I-SDD-1算法的查询计划；设计了适用于该问题的群体初始化方法、群体规模、适应度函数、结束条件和相关遗传算子；通过仿真程序比较了I-SDD-1算法和SDD-1算法生成查询计划的时间复杂度；在此基础上结合绿色清洗数据库系统的需求特性，设计了符合该系统特点的查询优化方法并设计了模拟实验。
实验证明，尽管查询连接的站点数目较少时，I-SDD-1算法生成查询计划的时间较长。
但是由于其生成的查询计划通信费用较小，所以在涉及到数据的远程传输时，I-SDD-1算法的整体查询效率高于SDD-1算法。
当查询连接的站点数目较多时，I-SDD-1算法在生成查询计划时间和通信费用两方面都优于SDD-1算法。
由于遗传算子设计得不够理想，I-SDD-1算法的执行结果并不是每次都是最优的。
完善遗传算子的设计以及提高I-SDD-1算法收敛于最优解的概率将是以后的研究方向。
关键词：I-SDD-1算法 查询优化算法 分布式数据库 遗传算法 SDD-1算法AbstractAs a method of query optimization for distributed database, SDD-1 has its own defects. The two major defects are the communication cost of query plan generated by SDD-1 algorithm is not the least, and it will cost too much time to produce a query plan when there are many query stations. Both of them will reduce the query efficiency.For these two major defects, an I-SDD-1 algorithm based on genetic algorithm is introduced in this paper. I-SDD-1 algorithm uses Genetic Algorithm rather than Hill-climbing algorithm for solving query plan. The population initialization method, population size, fitness function, end condition and other associated genetic operators which are applied to this problem are designed in this paper, and an experiment is also designed to compare SDD-1 algorithm and I-SDD-1 algorithm in efficiency of producing query plan. Then the analysis of the green cleaning database system’s characteristics, based on which I-SDD-1 algorithm is chosen as the query optimization method of green cleaning database system, is present. Finally, a simulation experiment is designed to prove that I-SDD-1 algorithm is better than SDD-1 algorithm in this system.It is proved by the experiments designed in this paper that the communication cost generated by I-SDD-1 algorithm is less than that generated by SDD-1 algorithm in most case. Although when the relatively number of semi-joins is smaller, I-SDD-1 algorithm takes longer time for generating query plan than SDD-1 algorithm, the saving communication cost makes the query efficiency of I-SDD-1 algorithm still higher than SDD-1 algorithm. Moreover, when the relatively number of semi-joins is great, I-SDD-1 algorithm is superior to SDD-1 algorithm in both communication cost and time spent on generating query plan.However, the generic operations have not been designed good enough that the communication cost generated by I-SDD-1 algorithm is always less than SDD-1 algorithm. So it is the future direction of research how to improve the genetic operations of I-SDD-1 algorithm.Keywords: I-SDD-1 Algorithm Query Optimization Algorithm Distributed Database System Genetic Algorithm SDD-1 Algorithm创新性声明本人声明所呈交的论文是我个人在导师的指导下进行的研究工作及取得的研究成果。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
（ｃ ｎ ｍｉ ＆ ｎ ｇ ｍ ｎ ｏｌ ｅｏ ｎ ｕ，ｅｅ ２ ０ ５ ，ｈｎ ） Ｅ ０ ｏ ｃ Ｍａ ａ ｅ ｅ ｔ ｌｇ ｆ ｈ ｉ ｆｉ ３ ０ ９Ｃ ｉａ ｓ Ｃ ｅ Ａ Ｈ
Ａｂｓｒ ｔＤｉｔｉｕｔｄ ｄ ｔｂａ ｅｓ ｓｅ ｓｄｅ ｌ ｔ ｎ ｎｃ ｅ ｓ ｏｔｏ ｗ ｏ ｔ ｎ ｎ ｏ ｔ ａｃ ： ｓｒｂ ｅ ａ ａ ｓ ｙ ｔｍ ｈａ ａｔｗｉｈ ａ ｄ ｉ ｒ ａ ｅａｌ ｆｎｅ ｃ ｎ ｅ ｔａ ｄ ｃ ｍｐｌｘｔ ｅ ａ ｅｏｆｄ ｓｒｂ ｔｏ ｅ ｉｙ ｂ ｃ ｕｓ ｉｔｉ ｕ ｉｎ ａ ｒｄｕ ｄ ｎｃ ｆ ｒ ａａ ｉｔｉ ｔｄ Ｏ ｎ ｑ ｉｅＳ ｎｄ ｅ ｎ ａ ｙ ｏ ｄ ｔ ｄ ｓｒｂｕ ｅ ｔ ｉ ｕｒ ，Ｏ ｔ ｑ ｒ ｓ ａ ｅ ｙ ｅ ｍ ｓ ｈｅ ｕｅｙ ｔ ｔｇ ｓ ｅ ｐａｔｃ ｌｒｙ ｍｐｏ ｔｎ ． ｉ ｔｘ ｉｔｏ ｃ ｔ ｒ ｒｉ ｕａ ｌ ｉ ｒａ ｔＴｈ ｓ ｅ ｔ ｎｒ ｄｕ ｅ ｄ ｈｅ ｃ ａ ａ ｔｒｓｉ ｓｏ ｕｅｙ ｓｒ ｔｇｙｗｈｉｈｂａ ｅ ｎｔ ｅＳＤＤ— ｌ ｏ ｉｈ ａ ｄ ｄ ｓｕｓ ｅｄｅｅ ｔ ｎ ｍｐｒ ｖ ｎ ｅｈ ｓ ｈ ｒ ｃｅｉｔｃ ｆｑ ｒ ｔａｅ ｃ ｓ ｄ ｏ ｈ Ｉａｇ ｒｔ ｍ ｎ ｉｃ ｓｔ ｆ ａ ｄ ｉ ｈ ａ ｏ ｉ ｇｍ ｔｏｄ ．
ｃ ｓ ）１ ｏｔ
Ｂ ＋ Ｂ — Ｊ ｛ｅ ｏ ｅ Ｓ ｒ ｍ Ｂ ｝ Ｓ 一 Ｓ Ｓ ｒ ｍ ｖ Ｊ ｆ ｏ Ｓ Ｅ ＋ Ｅ ＋ Ｊ ｛ｐ ｅ ｄ Ｓ ｏ ｅ ｅ ｕ Ｊ ｎ ｓ ｒ ｔ ｇ ） Ｓ 一 Ｓ Ｓ ａ ｐ ｎ Ｊ ｔ ｃ ｔ ｏ ｔ ａ ｅ ｙ
中图分类号：Ｔ ３１ Ｐ １
文献标识码 ：Ａ
文章编号：１０— ５９（ ００ ６ ０３ — １ ０ ７ ９ ９ ２ １ ）１— ０４ ０
Ｔ ｅＤｉ ｒｂ ｔｄＤａａ ａｅＱｕ ｒ ｔ ｚ ｔ ｎ ｈ ｓ ｉｕｅ ｔｂ ｓ ｅｙＯｐｉ ａｉ ｔ ｍｉ ｏ
ｅ ｒ ｈ ｏ ＤＤ－ ｇ ｒｔ ｍ １Ａｌ ｏ ｉ ｈ
摘 要 ：分 布式数 据 库 系统 由于数 据 的分 布和 冗余 使得 分 布 式查询 处理 增加 了许 多新 的 内容 和 复 杂性 ，因此分 布式 查 询 处理 的 策略 显得 尤为 重要 。本 文介 绍 了基 于 Ｓ Ｄ一 Ｄ １算法 的查 询 策略 的特 点 ，并提 出存 在 的 问题 及 改进 方 法。 关键 词 ：分布 式数 据库 ；查 询策 略 ；Ｓ Ｄ～ 算 法 Ｄ １
、
Ｓ ￣ｍ ｓ — ｅ ｅ ｉ ｉ ｌ（ Ｓ） Ｓ ： ｅ ｉ ｉ ｎｗｉｈｍ ｘ（ ｅ ｅ ｉ Ｊ ｏ ｔ ｂ ｎ ｆ ｃ ａ Ｂ ｛ Ｊ ｓ ｍ ｊ ｏ ｔ ａ ｂ ｎ ｆ ｔ
— —
资源 尽量 地少 ，从而 降低整个 系统 开销 。针对 查询 响应时 间优化 策 略的 目 是尽量 减少 查询 的响应 时间 ，而 不计 较系统 资源 的耗 费。 标 查询 优化有 两种基 本方法 ：第 一是查 询转化 ，即以不 同的顺序 执 行关系 操作 ，如连 接和投 影操 作 ；第二 是查询 映射 ，即使 用一 系 列 高效 的算法来 存取各 种设 备和实现 关系 操作 。即查 询映射 是针对
Ｋｅ ｗｏ ｄ ： ｓ ｉｕｅ ａａ ａｅ ｅｙｓｒｔｇ ；ＤＤ— ｌｏｉ ｍ ｙ ｒ ｓＤｉｔｂ ｔｄｄ ｔｂ ｓ ； ｒ ｔａｅ ｙＳ ｒ Ｑｕ ｌａｇ ｒｈ ｔ
分布 式 数据 库 系统 是 数据 库 系统 与计 算机 网络 系统 结合 的产 物 ，具有 数据独 立性 、集 中与 自制相结合 的控制 机制 、存在适 当的 数据冗余 度 、事 务管理 的分布性 等特点 。在分布 式数据库 系统 中， 数据独立 性除 了数 据 的逻 辑独立 性与物理 独立性 外 ，还有 数据分 布 透明性 。数据分布 透 明性 指用户 不必关心 数据是 如何被逻 辑分片 的 （ 数据分 片透 明性 ），不 必关心数 据及其 片段是 否被复制 及复制 副 本的个数 （ 数据 复制透 明性 ），也不必关 心数据 及其片段 的物理 位 置分布的 细节 （ 据位置透 明性 ），同时 也不必 关心局部场 地上 数 数 据 库支持 哪种数据 模型 。有 了分布 透明性 ，用 户 的查询程 序书写起 来就 如 同数据 没有分布 一样 ，使 系统使用 起来更 简单 、有 效 。 分布 式查 询策 略 的基 本特 点 在 分布 式 查询 处理 技 术 中 ，查询 策略 的基 本 类型 通 常包 括 两 类 ：针 对查询执 行代 价的策 略和针 对查询 响应 时间 的策略 。针对 查 询 执 行时 间代 价进 行 优化 策 略 的 目标 是使 查 询执 行所 使 用 的系 统
一 ．．．— —
３ ． ４．— ． —
ｐ ｃ ｓｉ ｒｏ ｅｓ ｎｇ Ｂｓ 一 ＜
Ｆ ｒ ａ ｈ ｓｍ ｊｏ Ｊ ｎ Ｏ ｏ ｏ ｅ ｃ ｅ ｉ ｉ ｎ Ｓ ｉ Ｇ ｄ ｉ ｏ ｔ （Ｊ ＜ｅ ｅ ｉ （Ｊ ｔｅ ｆ ｃ ｓ ｓ ） ｂ ｎｆ ｔ Ｓ ） ｈ ｎ
Ｂ （ Ｂ Ｊ Ｓ 一 ＳｕＳ
ｅ —ｉ ｎｄ ｆ ｅ —ｆ ｎｄ ｏｒ ｗ １ Ｂ ｈｉ ｅ ｓ≠ ｂ ｉ ｅｇ ｎ ｄ ｏ
但 是， Ｄ 一算 法存 在 一个严 重 问题 ， 就 是它 的算 法 的复杂 ８Ｄ１ 那 性 。当元 组数 目很大 时 ，进 行查 询搜 索 的代 价迅 速增 加 ，使 系统
关 系的存 取方法 和操作 的执行 算法进 行决 策 ， 查询 转化则 是针 对 无法 承受 。为此 ，我 们在 此 基础 上对 它进 行 改进 ，降低 它 的时 间 而 操作 执行 的顺序 及不 同站点之 间数据 流动 的顺序 进行 决策 。 复杂 度 。我们 提 出 的改进 算 法描 述如 下 ：假 设 已经建 立 执行 策略 二 、Ｓ Ｄ １ Ｄ 一 算法 Ｅ ，有益 半连 接存 储表 Ｂ表 。 ｓ ｓ ＳＤ１ Ｄ 一 算法 由两 部分 组成 ：基本 算法 和 后优 化 。 本算 法是 根 基 （ ）置 Ｅ 为空 ，读 取 并行参 数值 Ｐ 一 ｓ ； （ ）计 算所 有 的有益 半连 接 并加 入Ｂ 表 中 ； 二 ｓ 据评 估所 缩 减程 序 的费用 ，效率 ，收益估 算 等几 个 因 素， 给 出全 部 的半连 接 缩减 程序 集 ，决 定一 个最 有 益 的执 行策 略 。主 要包 括 （ ） 择最 有 益半 连接 Ｘ 比ｘ ＇范 围内 的有益 半连 接 ， 三 选 和 ｄＰ 若 三个 基本 步骤 ：（ ） 始化 ：已准 备好 从查 询数 转 换的 优化 模 型 ， 这 些有 益 半连 接涉 及 到 的关 系有 重复 者 ，则 去掉 其 中较 小 的有益 １初 且所 有关 系 已完 成局 部缩 减 。 （ ）优 化 ：根据 初 始条 件 ，构造 可 半 连接 ，将 最 终得 到 的有 益半连 接 从Ｂ 表 中删 除并 加入Ｅ 中； ２ ｓ ｓ 能 的半连 接 缩减 程序 ：按 半 连接 缩减 程序 的静态 特 性表 ， 分别 计 （ ）判 断Ｅ 是 否包 含所 有 有益 半连 接 ，是 则输 出此 执行 策 四 ｓ 算其代 价和 产 生 的益 处 ， 其 中选 取一 个 半连接 程 序 ，设为 ｓ 从 ；以 略 ，否 则执 行 下一 步 ； ｓ 成 缩减 以后 ，又 用 重新 产 生 的 一组 新 的 静态 特 性表 再 进 行 计 完 （ ）调 整统 计数 据 ； 五 算 ，再从 其 中选取 一 个合 适 的半连 接 程序 ，但每 一个 都只 做 一次 ； （ ）转 到第 （ ）步 。 六 二 循 环下 去 ，直到 没有 半连 接缩 减程 序 为止 。 （ ）结束 ：以最 后 一 ３ 三 、结 束 语 次缩减 关 系 的静态 特 性表 为基 础 ，进 行 费用 计算 ，选 择场 地 。 后 经过 实验 验证， 用改进 的ＳＤ １ 采 Ｄ一算法对 多关系查询进行优化后 ， 优 化是 将基 本 算法 得 到的解 进行 修 正 ， 已得 到更合 理 的执 行 策略 。 不但减少 了通信代价 ，而且提高 了查询执行 的并行能力 。 以当查询 所 包 括 两种 修正 ，一种 是如 果最 后 一次 半连 接 程序 缩减 关 系 的所 在 涉及 到的连接个数较 多时 ，应用 改进的ＳＤ １ Ｄ一算法 ，通过在优化过程 场 地恰 好 是被 选 中的执 行场 地 ， 则最 后一 次 半连 接 可 以取 消 。 另 中添加并行参数 ，能很 好的提高 了ＳＤ ｌ Ｄ—算法 的并行执行 能力 。 种 修正 是在 基 本算 法 的流程 图进行 修正 ，因为 某 一个 半连 接 缩 参 考文 献 ： 减程 序 的代价 可能 很高 ，就 必 须修 正半 连接 的操作序 。 ［ 解飞 ， 丽 ， 宁． 于数 据 立 方体 的 关联规 则挖 掘 方 法研 １ 】 唐培 魏 基 算法 ：Ｓ Ｄ 卜Ｑ Ａ Ｄ 一 Ｏ 究【 ． Ｊ 气象水 文 海洋仪 器，０ ８１ 】 ２０， ｉ ｐ ｔ Ｇ ｑ ｅ ｙｇ ａ ｈｗｉ ｈｎ ｒ ｌ ｔ ｏ ｓ ｓ ａ ｉ ｔ ｃ ｏ ｎ ｕ ：Ｑ ： ｕ ｒ ｒ ｐ ｔ ｅ ａ ｉ ｎ ； ｔ ｔ ｓ ｉ ｓ ｆ ｒ ［ 于红 ， 秀坤． 于值 的分 布式 查询 优化 算 法 ［． ２ 】 王 基 Ｊ 大连 理 工大 】 ｅ ｃｈ ｒ ａ ｏ ａ ｅｌ ｔｉ ｎ 学学报 ， ０ ， ２ ５ ０ ３
一
ｏ ｐ ｕｔ ｕｔ： ＥＳ： ｅ ｃ ｔｉ ｎ ｔ ａｔ ｇ ｘｅ ｕ Ｏ ｓ ｒ ｅ ｙ ｂｅ ｎ ｇｉ
Ｅ 一 １ ｅ ｌ ｏ ｅ ａ ｉ Ｉ （ Ｇ ｓ ｏ ａ — ｐ ｒ ｔ Ｏｌ Ｑ ） Ｓ
ｍ ｏｄｉ ｙ ｓｔ ｒｉ ｔ ＣＳ ｔ ｒ ｌ ｔ ｔ ｅ ｅ ｆ ｔ ｏ ｌｏ ａ ｆ ａ ｓ ｉ ｏ ｅｆ ｅｃ ｈ ｆ ｅｃ ｆ ｃｌ
计算机光盘软件与应用
工程技术
Ｃ ｍ ｕ ｅ Ｄ Ｓ ｆ ｗ ｒ ｎ ｐ ｌｃ ｔ ｏ ｓ ｏ ｐ ｔ ｒ Ｃ ｏ ｔａ ｅａ ｄＡ ｐ ｉ ａ ｉ ｎ
２１ ０ ０年第 １ ６期
基于 Ｓ Ｄ １ Ｄ 一 算法的分布式数据库查询优化策略的研究