安慶ssl適用于網(wǎng)站、小程序/APP、API接口等需要進(jìn)行數(shù)據(jù)傳輸應(yīng)用場(chǎng)景，ssl證書(shū)未來(lái)市場(chǎng)廣闊！成為創(chuàng)新互聯(lián)的ssl證書(shū)銷售渠道，可以享受市場(chǎng)價(jià)格4-6折優(yōu)惠！如果有意向歡迎電話聯(lián)系或者加微信：18982081108（備注：SSL證書(shū)合作）期待與您的合作！

一、介紹

Themis是宜信公司DBA團(tuán)隊(duì)開(kāi)發(fā)的一款數(shù)據(jù)庫(kù)審核產(chǎn)品，可幫助DBA、開(kāi)發(fā)人員快速發(fā)現(xiàn)數(shù)據(jù)庫(kù)質(zhì)量問(wèn)題，提升工作效率。其名稱源自希臘神話中的正義與法律女神。項(xiàng)目取此名稱，寓意此平臺(tái)對(duì)數(shù)據(jù)庫(kù)質(zhì)量公平判斷，明察秋毫。

此平臺(tái)可實(shí)現(xiàn)對(duì)Oracle、MySQL數(shù)據(jù)庫(kù)進(jìn)行多維度（對(duì)象結(jié)構(gòu)、SQL文本、執(zhí)行計(jì)劃及執(zhí)行特征）的審核，用以評(píng)估對(duì)象結(jié)構(gòu)設(shè)計(jì)質(zhì)量及SQL運(yùn)行效率?？蓭椭鶧BA及開(kāi)發(fā)人員，快速發(fā)現(xiàn)定位問(wèn)題；并提供部分輔助診斷能力，提升優(yōu)化工作效率。全部操作均可通過(guò)WEB界面進(jìn)行，簡(jiǎn)單便捷。此外，為了更好滿足個(gè)性化需求，平臺(tái)還提供了擴(kuò)展能力，用戶可根據(jù)需要自行擴(kuò)展。

Themis，是希臘正義與法律女神，以頭腦清晰見(jiàn)稱。項(xiàng)目采用此名稱，寓意著平臺(tái)可對(duì)數(shù)據(jù)庫(kù)質(zhì)量公平判斷，明察秋毫之意。

1.1 功能概述

• 事后審核，自主優(yōu)化部分放在二期實(shí)現(xiàn)。亦可在項(xiàng)目設(shè)計(jì)階段引入，起到一部分事前審核的作用。
• 通過(guò)WEB界面完成全部工作，主要使用者是DBA和有一定數(shù)據(jù)庫(kù)基礎(chǔ)的研發(fā)人員。
• 可針對(duì)某個(gè)用戶審核，可審核包括數(shù)據(jù)結(jié)構(gòu)、SQL文本、SQL執(zhí)行特征、SQL執(zhí)行計(jì)劃等多個(gè)維度。
• 審核結(jié)果通過(guò)WEB頁(yè)面或?qū)С鑫募男问教峁?
• 平臺(tái)支持主流的Oracle、MySQL數(shù)據(jù)庫(kù)，其他數(shù)據(jù)庫(kù)放在二期實(shí)現(xiàn)。
• 盡量提供靈活定制的能力，便于日后擴(kuò)展功能。

1.2 支持的數(shù)據(jù)庫(kù)

• MySQL（5.6及以上）
• Oracle（10g及以上)

1.3 審核維度

• 數(shù)據(jù)庫(kù)結(jié)果（對(duì)象）=》指數(shù)據(jù)庫(kù)對(duì)象，常見(jiàn)的表、分區(qū)、索引、視圖、觸發(fā)器等。
• SQL文本（語(yǔ)句）=》指SQL語(yǔ)句文本本身。
• SQL執(zhí)行計(jì)劃=》指數(shù)據(jù)庫(kù)中SQL的執(zhí)行計(jì)劃。
• SQL執(zhí)行特征=》指語(yǔ)句在數(shù)據(jù)庫(kù)上的真實(shí)執(zhí)行情況。

1.4 實(shí)現(xiàn)原理

整個(gè)平臺(tái)的基本實(shí)現(xiàn)原理很簡(jiǎn)單，就是將我們的審核對(duì)象（目前支持四種），通過(guò)規(guī)則集進(jìn)行篩選。符合規(guī)則的審核對(duì)象，都是疑似有問(wèn)題的。平臺(tái)會(huì)將這些問(wèn)題及關(guān)聯(lián)信息提供出來(lái)，供人工甄別使用。由此可見(jiàn)，平臺(tái)的功能強(qiáng)大與否，主要取決于規(guī)則集的豐富程度。平臺(tái)也提供了部分?jǐn)U展能力，方便擴(kuò)展規(guī)則集。

1.5 平臺(tái)架構(gòu)

圖中的方框部分，為平臺(tái)的主要模塊。底色不同的模塊，表示當(dāng)前的進(jìn)度狀態(tài)不同。虛線代表數(shù)據(jù)流，實(shí)線代表控制流。其核心為這幾個(gè)模塊：

• 數(shù)據(jù)采集模塊。它是負(fù)責(zé)從數(shù)據(jù)源抓取審核需要的基礎(chǔ)數(shù)據(jù)。目前支持從Oracle、MySQL抓取。
• OBJ/SQL存儲(chǔ)庫(kù)。這是系統(tǒng)的共同存儲(chǔ)部分，采集的數(shù)據(jù)和處理過(guò)程中的中間數(shù)據(jù)、結(jié)果數(shù)據(jù)都保存在這里。其核心數(shù)據(jù)分為對(duì)象類和SQL類。物理是采用的MongoDB。
• 核心管理模塊。圖中右側(cè)虛線部分包含的兩個(gè)模塊：SQL管理和OBJ管理就是這部分。它主要是完成對(duì)象的全生命周期管理。目前只做了簡(jiǎn)單的對(duì)象過(guò)濾功能，因此還是白色底色，核心的功能尚未完成。
• 審核規(guī)則和審核引擎模塊。這部分是平臺(tái)一期的核心組件。審核規(guī)則模塊是完成規(guī)則的定義、配置工作。審核引擎模塊是完成具體規(guī)則的審核執(zhí)行部分。
• 優(yōu)化規(guī)則和優(yōu)化引擎模塊。這部分是平臺(tái)二期的核心組件。目前尚未開(kāi)發(fā)，因此為白色底色。
• 系統(tǒng)管理模塊。這部分是完成平臺(tái)基礎(chǔ)功能，例如任務(wù)調(diào)度、空間管理、審核報(bào)告生成、導(dǎo)出等功能。

1.6 操作流程

二、環(huán)境搭建

本項(xiàng)目中會(huì)使用到mysql，mongo和redis，python支持2.6、2.7，暫不支持python3。

mysql用來(lái)存儲(chǔ)pt-query-digest抓取的mysql的慢查詢，mongo存儲(chǔ)我們的規(guī)則、oracle的采集結(jié)果、執(zhí)行job，解析結(jié)果集等，redis作為任務(wù)調(diào)度celery的隊(duì)列。

在mysql的數(shù)據(jù)采集部分我們使用的是pt-query-digest工具。

2.1 依賴安裝

新建用戶

為了減少后面對(duì)supervisord.conf配置文件的修改，我們建議使用統(tǒng)一的用戶進(jìn)行安裝

    adduser themis-test
    su - themis-test

名稱欄目：宜信開(kāi)源|數(shù)據(jù)庫(kù)審核軟件Themis的規(guī)則解析與部署攻略-創(chuàng)新互聯(lián)
文章轉(zhuǎn)載：http://www.rwnh.cn/article10/csosdo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供營(yíng)銷型網(wǎng)站建設(shè)、全網(wǎng)營(yíng)銷推廣、Google、做網(wǎng)站、商城網(wǎng)站、域名注冊(cè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)