做数仓运维管理，你务必要了解这一眼观六路耳听八方的“贤能”

引言：文中关键详细介绍GaussDB（DWS）数据库查询视频监控系统运维管理保障体系的规划设计和现况。

文中共享自华为云服务小区《眼观六路耳听八方还不知疲倦？数仓智能运维服务体系是怎么做到的？》，全文创作者：鲁大师。

情况详细介绍

初期，数据库管理只是给予SQL指令来查看其內部的运作情况，造成数据库查询运维管理实际操作门坎高，便捷性差，DBA一度变成 高宽比系统化的重要职位，享有高薪职位和大伙儿艳羡的眼光的另外，也为公司的网络信息安全产生了可变性风险性。而且，cmd运维管理不形象化，比较严重依靠运维管理工作人员工作经验，不可以保证迅速的发觉、精准定位、解决困难，造成数据库查询运维管理难题，发觉难，精准定位难，处理难。

为了更好地解决这一困境，数据库查询运作情况数据可视化（数据库查询视频监控系统）应时而生，根据数据可视化的方式以人们有利于了解的数据图表方式，将关键数据信息以图形界面的方式展现给运维管理工作人员，进而明显的减少了数据库查询运维管理的门坎，提升了数据库查询运维管理的高效率。这一环节有一些象征性的商品例如：OEM(Oracle), ViewPoint(Teradata)，这些。可是，这一阶段客户的数据信息的经营规模并不是非常大，数据库查询也仍然布署在客户自身的大数据中心，仍然是好多个DBA运维管理几身数据库查询的环节。

伴随着云时代的来临，阿里云数据库慢慢代管了顾客的数据储存服务项目，云化将一切繁杂的IT运维工作中都集中化在云管理后台了起來，进而把顾客从技术专业，繁杂，繁杂的大数据中心运维管理主题活动中解放了出去，使顾客可以更为致力于其关键业务流程。另外，云服务供应商做为数据储存服务项目的服务提供者，则必须在IT运维与数据库查询运维管理上稳步发展，充分发挥其精英团队平稳，系统化水平高，把握大量数据库查询运作数据信息的优点；灵活运用现阶段深度学习、人工智能技术行业的研究成果，应用方式方法明显提高每名运维管理工作人员能够管理方法的数据库查询总数，进而完成数据库查询运维管理工作中的“降本增效”。另一方面，数据库查询服务项目使用云服务器后，云服务供应商所必须运维管理的数据库查询总数与以前对比天壤之别，之前的专用工具很有可能早已不适合云时代的要求。怎样搞好云上海市量数据库查询的运维管理工作中将变成 云服务供应商的一个极大挑戰。

数据库查询智能运维管理体系

传统定义上的数据库查询监控服务只是就是指（1）收集数据库查询运作情况；（2）汇报/储存数据库查询运作数据信息；（3）图形界面展现数据库查询运作情况数据信息。可是，这只是是数据库查询视频监控系统运维管理管理体系的一部分。

假如把全部数据库查询视频监控系统运维管理管理体系比成一个人得话，传统定义上的数据库查询监控服务只是意味着了，双眼的人物角色。该服务项目只有保证发现问题，鉴别精准定位和解决困难都必须DBA的干预。因而DBA才算是传统式数据库查询监管运维管理管理体系中的关键因素，这也是DBA优秀人才为什么这般重要的缘故之一。

而云时代的来临和数据分析、人工智能技术等技术性的完善，给了数据库查询监管运维管理大量的想像室内空间。我能在传统式数据库查询监管（双眼）的基本上，提升预测分析剖析和根因分辨控制模块，创建状况-根因-解决方法的投射关联（人的大脑），最终根据数据管理控制模块实行解决方法（两手），进而完成从发现问题，精准定位，到解决困难的运维管理闭环控制。而且设备有别于人们，只需算率容许，它能够保证眼观六路，耳听八方，日夜不停，也不会感觉无趣，7×24的盯住不计其数数据库管理的各种各样运作数据信息，不容易忽略一切一个细微的潜在性难题。因而，数据库查询运维管理工作中的智能化系统中，应用标准或优化算法干固DBA分辨和管理决策工作经验将是十分关键的一环。

GaussDB(DWS)的数据库查询智能运维管理体系

参照同行数据库查询监管运维管理管理体系的基本建设工作经验，融合GaussBD(DWS)数仓的本身特性，大家提前准备从眼，脑，手三个层面使力创建闭环控制的数据库查询视频监控系统运维管理管理体系。

GaussDB(DWS)应用DMS来安装数据库查询的智能运维管理体系。DMS可能串出数据库查询运维管理全过程中的监管，剖析，解决三个流程，各自相匹配上文提及的数据库查询智能运维管理体系中的眼，脑，手三一部分，从设计概念上产生运维管理管理体系的闭环控制。

监管一部分：关键承担数据库查询运作情况数据的采集、储存和数据可视化展现，这一部分基本上相当于传统式的数据库查询的监管业务流程。这一部分作用和指标值的选择，大家参照了同行及其运维管理精英团队的提议，将监管指标值分成最底层IT系统运维管理指标值和数据库查询运维服务指标值两大类，已经各自逐渐补足和健全中。监管控制模块是DMS数据库查询运视频监控系统运维管理管理体系最先使力，然后在短期内内产生竞争能力的控制模块。

剖析一部分：做为全部DMS数据库查询智能运维管理体系的人的大脑，该一部分是担负运维管理数据统计分析与管理决策的重要控制模块。该一部分由于其多元性，现阶段还处在设计方案设想环节。基本整体规划有三个子控制模块，时间序列分析的变化趋势子控制模块，该控制模块关键用于做发展趋势预测分析剖析，用于预测潜在性的难题；逻辑性推论子控制模块，客户分析问题状况与具体根因中间的关联，能够完成从难题状况到开启缘故的推论，基本考虑到应用百度搜索引擎技术性完成；数据仓库子控制模块，关键用以状况、根因与解决方法中间的投射关联表明，便捷从精准定位的根因中寻找最好的解决方法。

解决一部分：关键由DWS给予的数据管理作用担负，现阶段能够给予数据库查询参数配置（可配备主要参数少，必须进一步丰富多彩），工作中负荷序列配备，群集安裝/卸载掉，群集重新启动，群集扩充，群集数据信息重遍布及其连接点温备等运维管理工作能力。

GaussDB(DWS)数据库查询智能运维典型性客户与要求

为了更好地进一步梳理数据库查询智能运维商品的设计理念，大家方案从客户的视角剖析其要求，随后从要求导出来作用（专用工具）界面设计，从作用（专用工具）网页页面汇总出所需监管数据库查询指标值。根据剖析数据库查询视频监控系统的各种各样应用情景，大家对数据库查询视频监控系统的客户干了客户人物角色肖像，界定了数据库查询运维管理全过程中的三种人物角色，并觉得不一样人物角色只是关心数据库查询运维管理的一个侧边。在具体的数据库查询运维管理情景中，很有可能同一个客户会兼任多种多样人物角色，可是这儿大家为了更好地便捷剖析只是从逻辑性上界定这三种人物角色。

应用程序开发：关键指顾客侧的应用程序开发人物角色，她们承担设计方案实际的业务流程SQL。她们关注业务流程SQL实行的准确性和实行高效率。运用研发工程师必须采用web SQL来调节其SQL句子的查看高效率；必须采用查看监管网页页面来查询业务流程SQL在具体实行情景中的主要表现和資源耗费；必须采用工作中负荷序列监管来确定新开发设计的业务流程SQL是不是在适合的工作中负荷序列中，及其所配备的融断标准是不是有效，这些。

SRE：指的是华为云服务侧的数据库查询运维管理人物角色，她们一般 一个人必须承担不计其数个群集的平稳运作，她们必须可以快速鉴别出群集运作情况的出现异常，群集資源短板及其群集潜在性的扩充要求，而且她们还必须大力支持顾客的寻求帮助，协助顾客精准定位，确定和解决困难。SRE必须连接点資源监管来鉴别群集中的資源歪斜；必须鉴别群集資源耗费基准线趋势分析，进而鉴别到扩充需并提示客户；必须关心储存转变 以测算下一次基本维护保养的时间点并全自动整体规划；另外还必须回应用户需求，应用DMS给予的难题精准定位专用工具，輔助客户精准定位现网难题。

DBA：指的是GaussDB(DWS)数据库集群权威专家，她们了解数据库查询设计方法论，数据库查询的调优，数据库查询难题精准定位。她们必须剖析精准定位数据库查询的常见故障，从資源和业务流程视角应用多种多样专用工具综合分析手机定位系统常见故障，系统软件可靠性和潜在性短板；也必须协助客户从业务流程、概念模型设计的视角去强烈推荐数据库查询的数据库索引，分布列配备，依据客户工作能力强烈推荐客户选购适合的群集经营规模这些；另外还必须輔助运用研发工程师调优造成特性劣变的SQL句子；在寻找准确的常见故障根因后，强烈推荐适合的解决方法修补常见故障。

在一般来说在云计算平台情景中，客户人物角色一般仅有应用程序开发和SRE二种，云计算平台情景中的SRE人物角色通常包含了DBA的人物角色。大家在这儿将运维管理人物角色细分化的目地，实际上是要展现一个详细的运维管理情景沙盘模型，将顾客的运维管理需求分门别类的列举出去，为事后进一步的作用（专用工具）界面设计和运维管理场景制作给予基本。

GaussDB(DWS)数据库查询智能运维指标值

数据库查询监管指标值总数多，方式和逻辑性繁杂，依据指标值种类能够分成逻辑顺序与物理学关联二种。在其中逻辑顺序指数值库內部逻辑顺序，例如，最高层是数据库查询，数据库查询中有好几个schema，schema中有好几个表，数据库查询中有好几个客户，一个客户能够有好几个schema和表。而物理学关联就是指，gaussDB(DWS)群集的拓扑关系，例如，一个数据库集群是由好几个测算连接点组成，每一个测算连接点上面布署好几个测算案例。这二种指标值关联都是会危害到数据库查询指标值的收集层面和汇聚展现层面。

由于上边早已剖析了指标值的层面关联，因此大家下边将只探讨实际的数据库查询指标值种类，而不容易对指标值的层面开展进行。数据库查询是一个软件技术服务，而它务必运作在一个宿主机和电脑操作系统以上，因而监管指标值大概能够分成两大类：

服务器资源类指标值：这一类指标值关键叙述系统软件上的各种各样資源耗费

数据库查询有关指标值：这一类指标值关键叙述数据信息特性有关的业务流程负荷水准

图中汇总了DMS收集的数据库查询关键指标值，实际指标值项依照指标值大类，分子指标值和继承指标值三个层级排序。但是，现阶段该指标值地形图并不固定不动，将来伴随着GaussDB(DWS)智能运维系统软件的逐渐完善，该指标值地形图会不断完善并固定不动出来。

由于MPP数据库查询的独特构形，数据库实例是做为过程试运转在连接点上的。因而，大家的指标值设计方案实际上自身会内置层面特性，例如硬盘利用率指标值，最少的层面应该是某一DN案例，上一级是连接点级，再上一级便是全部群集。因此，大家具体给予的监管指标值应该是指标值层面关联与群集指标值地形图的一个笛卡尔积。为了更好地叙述这类情况，大家引进分子指标值，继承指标值和组成指标值的定义。以上边的硬盘利用率为例子，大家将DN案例的硬盘利用率做为分子指标值，而别的层面的硬盘利用率做为继承指标值。

• 分子指标值：叙述数据库查询某一特点的最少层面指标值，例如连接点的CPU利用率，DN案例的硬盘利用率，这些。
• 继承指标值：（1）分子指标值在不一样层面上的汇聚結果，例如群集均值CPU利用率，群集硬盘利用率，这些；（2）对分子指标值做统计分析计算获得的新指标值，例如CPU歪斜率，这些。
• 组成指标值：将好几个分子指标值或是继承指标值组成在一起，进而获得的更为有利于了解的新指标值。例如群集身心健康度，这些。

现阶段DMS的指标值基本建设大量滞留在分子指标值和继承指标值环节，由于大家觉得应当最先补足数据库查询的基本指标值产生基本上的监管运维管理工作能力以后，才可以融合客户应用习惯性，深层发掘指标值在每个层面下的运维管理含意及其多种多样指标值组成后所意味着的运维管理实际意义。

汇总

最终，汇总一下，文中关键详细介绍了GaussDB（DWS）数据库查询视频监控系统运维管理保障体系的规划设计和现况。文中做为DMS系列产品文章内容的第一篇，关键具有一个概述详细介绍的功效，让大伙儿对GaussDB（DWS）数据库查询视频监控系统运维管理保障体系有一个大概的了解，大量干货知识关键点热烈欢迎希望事后的文章内容。

想掌握GuassDB(DWS)其他信息，热烈欢迎搜索微信“GaussDB DWS”关心微信公众平台，和您共享全新最齐的PB等比级数仓高科技，后台管理还可获得诸多学习材料哦~

加关注，第一时间掌握华为云服务新鮮技术性~