個人不認為nosql在少量數(shù)據(jù)存儲上有啥優(yōu)勢。nosql主要解決的是auto sharding的問題,你不需要sharding,搞啥nosql. 作者:方圓 鏈接:
成都創(chuàng)新互聯(lián)主要從事成都做網(wǎng)站、網(wǎng)站設(shè)計、外貿(mào)營銷網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)牡丹,10年網(wǎng)站建設(shè)經(jīng)驗,價格優(yōu)惠、服務(wù)專業(yè),歡迎來電咨詢建站服務(wù):028-86922220
騰訊云包括云服務(wù)器、云數(shù)據(jù)庫、CDN、云安全、萬象圖片和云點播等產(chǎn)品。
開發(fā)者通過接入騰訊云平臺,可降低初期創(chuàng)業(yè)的成本,能更輕松地應(yīng)對來自服務(wù)器、存儲以及帶寬的壓力。 云服務(wù)器
高性能高穩(wěn)定的云虛擬機,可在云中提供彈性可調(diào)節(jié)的計算容量,不讓計算能束縛您的想象;您可以輕松購買自定義配置的機型,在幾分鐘內(nèi)獲取到新服務(wù)器,并根據(jù)您的需要使用鏡像進行快速的擴容。
彈性web 服務(wù)
彈性Web 引擎(Cloud Elastic Engine)是一種Web 引擎服務(wù),是一體化web 應(yīng)用運行環(huán)境,彈性伸縮,中小開發(fā)者的利器。通過提供已部署好php、nginx 等基礎(chǔ)web 環(huán)境,讓您僅需上傳自己的代碼,即可輕松地完成web 服務(wù)的搭建。
負載均衡
騰訊云負載均衡服務(wù),用于將業(yè)務(wù)流量自動分配到多個云服務(wù)器、彈性web 引擎等計算單元的服務(wù),幫您構(gòu)建海量訪問的業(yè)務(wù)能力,以及實現(xiàn)高水平的業(yè)務(wù)容錯能力。騰訊云提供公網(wǎng)及內(nèi)外負載均衡,分別處理來自公網(wǎng)和云內(nèi)的業(yè)務(wù)流量分發(fā)。 云數(shù)據(jù)庫
云數(shù)據(jù)庫(CDB:Cloud Data Base)是騰訊云平臺提供的面向互聯(lián)網(wǎng)應(yīng)用的數(shù)據(jù)存儲服務(wù)。
NoSQL 高速存儲
騰訊NoSQL 高速存儲,是騰訊自主研發(fā)的極高性能、內(nèi)存級、持久化、分布式的Key-Value存儲服務(wù)。NoSQL 高速存儲以最終落地存儲來設(shè)計,擁有數(shù)據(jù)庫級別的訪問保障和持續(xù)服務(wù)能力。支持Memcached 協(xié)議,能力比Memcached 強(能落地),適用Memcached、TTServer 的地方都適用NoSQL 高速存儲。NoSQL 高速存儲解決了內(nèi)存數(shù)據(jù)可靠性、分布式及一致性上的問題,讓海量訪問業(yè)務(wù)的開發(fā)變得簡單快捷。
對象存儲服務(wù)(beta)
對象存儲服務(wù)(COS:Cloud Object Service),是騰訊云平臺提供的對象存儲服務(wù)。COS 為開發(fā)者提供安全、穩(wěn)定、高效、實惠的對象存儲服務(wù),開發(fā)者可以將任意動態(tài)、靜態(tài)生成的數(shù)據(jù),存放到COS 上,再通過HTTP 的方式進行訪問。COS 的文件訪問接口提供全國范圍內(nèi)的動態(tài)加速,使開發(fā)者無需關(guān)注網(wǎng)絡(luò)不同所帶來的體驗問題。
CDN
CDN(Content Delivery Network)即內(nèi)容分發(fā)網(wǎng)絡(luò)。騰訊CDN 服務(wù)的目標與一般意義上的CDN 服務(wù)是一樣的,旨在將開發(fā)者網(wǎng)站中提供給終端用戶的內(nèi)容(包括網(wǎng)頁對象—文本、圖片、腳本,可下載的對象—多媒體文件、軟件、文檔,等等),發(fā)布到多個數(shù)據(jù)中心的多臺服務(wù)器上,使用戶可以就近取得所需的內(nèi)容,提高用戶訪問網(wǎng)站的響應(yīng)速度。 云監(jiān)控
騰訊云監(jiān)控是面向騰訊云客戶的一款監(jiān)控服務(wù),能夠?qū)蛻糍徺I的云資源以及基于騰訊云構(gòu)建的應(yīng)用系統(tǒng)進行實時監(jiān)測。開發(fā)人員或者系統(tǒng)管理員可以通過騰訊云監(jiān)控收集各種性能指標,了解其系統(tǒng)運行的相關(guān)信息,并做出實時響應(yīng),保證自己的服務(wù)正常運行。
騰訊云監(jiān)控提供了可靠,靈活的監(jiān)控解決方案,當您首次購買云服務(wù)后,不需要任何設(shè)置,就可以獲得基礎(chǔ)監(jiān)控指標,同時,也可以通過簡單的步驟后,獲取到更多的個性化指標。除了豐富的監(jiān)控指標視圖以外,騰訊云監(jiān)控還提供個性化的告警服務(wù),客戶可以對任意監(jiān)控指標自定義告警策略。通過短信,郵件,微信等方式,實時推送故障告警。
騰訊云監(jiān)控也是一個開放式的監(jiān)控平臺,支持用戶上報個性化的指標,提供多個維度,多種粒度的實時數(shù)據(jù)統(tǒng)計以及告警分析。并提供開放式的API,讓客戶通過接口也能夠獲取到監(jiān)控數(shù)據(jù)。
云安全
騰訊公司安全團隊在處理各種安全問題的過程中積累了豐富的技術(shù)和經(jīng)驗,騰訊云安全將這些寶貴的安全技術(shù)和經(jīng)驗打造成優(yōu)秀的安全服務(wù)產(chǎn)品,為開發(fā)商提供業(yè)界領(lǐng)先的安全服務(wù)。騰訊云安全能夠幫助開發(fā)商免受各種攻擊行為的干擾和影響,讓客戶專注于自己創(chuàng)新業(yè)務(wù)的發(fā)展,極大的降低了客戶在基礎(chǔ)環(huán)境安全和業(yè)務(wù)安全上的投入和成本。
云撥測
云撥測依托騰訊專有的服務(wù)質(zhì)量監(jiān)測網(wǎng)絡(luò),利用分布于全球的服務(wù)質(zhì)量監(jiān)測點,對用戶的網(wǎng)站,域名,后臺接口等進行周期性監(jiān)控, 并提供實時告警, 性能和可用性視圖展示,智能分析等服務(wù)。 TOD 大數(shù)據(jù)處理
TOD 是騰訊云為用戶提供的一套完整的、開箱即用的云端大數(shù)據(jù)處理解決方案。開發(fā)者可以在線創(chuàng)建數(shù)據(jù)倉庫,編寫、調(diào)試和運行SQL 腳本,調(diào)用MR程序,完成對海量數(shù)據(jù)的各種處理。另外開發(fā)者還可以將編寫的數(shù)據(jù)處理腳本定義成周期性執(zhí)行的任務(wù),通過可視化界面拖拽定義任務(wù)間依賴關(guān)系,實現(xiàn)復雜的數(shù)據(jù)處理工作流。主要應(yīng)用于海量數(shù)據(jù)統(tǒng)計、數(shù)據(jù)挖掘等領(lǐng)域。已經(jīng)為微信、QQ 空間、廣點通、騰訊游戲、財付通、QQ 網(wǎng)購等關(guān)鍵業(yè)務(wù)的提供了數(shù)據(jù)分析服務(wù)。
騰訊云分析
騰訊云分析是一款專業(yè)的移動應(yīng)用統(tǒng)計分析工具,支持主流智能手機平臺。開發(fā)者可以方便地通過嵌入統(tǒng)計SDK,實現(xiàn)對移動應(yīng)用的全面監(jiān)測,實時掌握產(chǎn)品表現(xiàn),準確洞察用戶行為。不僅僅是記錄,移動APP 統(tǒng)計還分析每個環(huán)節(jié),利用數(shù)據(jù)透過現(xiàn)象看本質(zhì)。騰訊云分析還同時提供業(yè)內(nèi)市場排名趨勢、競品排名監(jiān)控等情報信息,讓您在應(yīng)用開發(fā)運營過程中,知己知彼,百戰(zhàn)百勝。
騰訊云搜
騰訊云搜(Tencent Cloud Search)是騰訊公司基于在搜索領(lǐng)域多年的技術(shù)積累,對公司內(nèi)部各大垂直搜索業(yè)務(wù)搜索需求進行高度抽象, 把搜索引擎組件化、平臺化、服務(wù)化,最終形成成熟的搜索對外開放能力,為廣大移動應(yīng)用開發(fā)者和網(wǎng)站站長推出的一站式結(jié)構(gòu)化數(shù)據(jù)搜索托管服務(wù)。 移動加速
移動加速服務(wù)是騰訊云針對終端應(yīng)用提供的訪問加速服務(wù),通過加速機房、優(yōu)化路由算法、動態(tài)數(shù)據(jù)壓縮等多重措施提升移動應(yīng)用的訪問速度和用戶體驗,并為客戶提供了加速效果展示、趨勢對比、異常告警等運營工具隨時了解加速效果。
應(yīng)用加固
應(yīng)用加固服務(wù)是騰訊云依托多年終端安全經(jīng)驗,提供的一項終端應(yīng)用安全加固服務(wù)。具有操作簡單、多渠道監(jiān)控、防反編譯防篡改防植入、零影響的特點,幫助用戶保護應(yīng)用版權(quán)和收入。
騰訊云安全認證
騰訊云安全認證是騰訊云提供的免費安全認證服務(wù),通過申請審核的用戶將獲得權(quán)威的騰訊云認證展示,讓您的業(yè)務(wù)獲得騰訊億萬用戶的認可。免費安全服務(wù),權(quán)威認證展示,騰訊云已為2.6萬網(wǎng)站、應(yīng)用保駕護航。
信鴿推送
信鴿(XG Push)是一款專業(yè)的免費移動App 推送平臺,支持百億級的通知/ 消息推送,秒級觸達移動用戶,現(xiàn)已全面支持Android 和iOS 兩大主流平臺。開發(fā)者可以方便地通過嵌入SDK,通過API 調(diào)用或者Web 端可視化操作,實現(xiàn)對特定用戶推送,大幅提升用戶活躍度,有效喚醒沉睡用戶,并實時查看推送效果。
域名備案
騰訊云備案服務(wù),幫助您將網(wǎng)站在工信部系統(tǒng)中進行登記,獲得備案證書懸掛在網(wǎng)站底部。目前支持企業(yè)、個人、政府機關(guān)、事業(yè)單位、社會團體備案。
云API
云API 是構(gòu)建云開放生態(tài)重要的一環(huán)。騰訊云提供的計算、數(shù)據(jù)、運營運維等基礎(chǔ)能力,包括云服務(wù)器、云數(shù)據(jù)庫、CDN 和對象存儲服務(wù)等,以及騰訊云分析(MTA)、騰訊云推送(信鴿)等大數(shù)據(jù)運營服務(wù)等,都將以標準的開放API 的形式提供給廣大企業(yè)和開發(fā)者使用,方便開發(fā)者集成和二次開發(fā)。
萬象圖片
萬象圖片是將QQ空間相冊積累的十年圖片經(jīng)驗開放給開發(fā)者,提供專業(yè)一體化的圖片解決方案,涵蓋圖片上傳、下載、存儲、圖像處理。
維納斯
維納斯(Wireless Network Service)專業(yè)的移動網(wǎng)絡(luò)接入服務(wù),使用騰訊骨干網(wǎng)絡(luò),全國400個節(jié)點,連通成功率99.9%。
云點播
騰訊云一站式視頻點播服務(wù),匯聚騰訊強大視頻處理能力。從靈活上傳到快速轉(zhuǎn)碼,從便捷發(fā)布到自定義播放器開發(fā),為客戶提供專業(yè)可靠的完整視頻服務(wù)。
本期目錄
DB-Engines數(shù)據(jù)庫排行榜
新聞快訊
一、RDBMS家族
二、NoSQL家族
三、NewSQL家族
四、時間序列
五、大數(shù)據(jù)生態(tài)圈
六、國產(chǎn)數(shù)據(jù)庫概覽
七、云數(shù)據(jù)庫
八、推出dbaplus Newsletter的想法
九、感謝名單
為方便閱讀、重點呈現(xiàn),本期Newsletter(2019年1月)將對各個板塊的內(nèi)容進行精簡。需要閱讀全文的同學可點擊文末 【閱讀原文】 或登錄
進行下載。
DB-Engines數(shù)據(jù)庫排行榜
以下取自2019年1月的數(shù)據(jù),具體信息可以參考,數(shù)據(jù)僅供參考。
DB-Engines排名的數(shù)據(jù)依據(jù)5個不同的因素:
新聞快訊
1、2018年9月24日,微軟公布了SQL Server2019預覽版,SQL Server 2019將結(jié)合Spark創(chuàng)建統(tǒng)一數(shù)據(jù)平臺。
2、2018年10月5日,ElasticSearch在美國紐約證券交易所上市。
3、亞馬遜放棄甲骨文數(shù)據(jù)庫軟件,導致最大倉庫之一在黃金時段宕機。受此消息影響,亞馬遜盤前股價小幅跳水,跌超2%。
4、2018年10月31日,Percona發(fā)布了Percona Server 8.0 RC版本,發(fā)布對MongoDB 4.0的支持,發(fā)布對XtraBackup測試第二個版本。
5、2018年10月31日,Gartner陸續(xù)發(fā)布了2018年的數(shù)據(jù)庫系列報告,包括《數(shù)據(jù)庫魔力象限》、《數(shù)據(jù)庫核心能力》以及《數(shù)據(jù)庫推薦報告》。
今年的總上榜數(shù)據(jù)庫產(chǎn)品達到了5家,分別來自:阿里云,華為,巨杉數(shù)據(jù)庫,騰訊云,星環(huán) 科技 。其中阿里云和巨杉數(shù)據(jù)庫已經(jīng)連續(xù)兩年入選。
6、2018年11月初,Neo4j宣布完成E輪8000萬美元融資。11月15日,Neo4j宣布企業(yè)版徹底閉源:
7、2019年1月8日,阿里巴巴以1.033億美元(9000萬歐元)的價格收購了Apache Flink商業(yè)公司DataArtisans。
8、2019年1月11日早間消息,亞馬遜宣布推出云數(shù)據(jù)庫軟件,亞馬遜和MongoDB將會直接競爭。
RDBMS家族
Oracle 發(fā)布18.3版本
2018年7月,Oracle Database 18.3通用版開始提供下載。我們可以將Oracle Database 18c視為采用之前發(fā)布模式的Oracle Database 12c第2版的第一個補丁集。未來,客戶將不再需要等待多年才能用上最新版Oracle數(shù)據(jù)庫,而是每年都可以期待新數(shù)據(jù)庫特性和增強。Database 19c將于2019年Q1率先在Oracle cloud上發(fā)布云版本。
Oracle Database 18c及19c部分關(guān)鍵功能:
1、性能
2、多租戶,大量功能增強及改進,大幅節(jié)省成本和提高敏捷性
3、高可用
4、數(shù)據(jù)倉庫和大數(shù)據(jù)
MySQL發(fā)布8.0.13版本
1、賬戶管理
經(jīng)過配置,修改密碼時,必須帶上原密碼。在之前的版本,用戶登錄之后,就可以修改自己的密碼。這種方式存在一定安全風險。比如用戶登錄上數(shù)據(jù)庫后,中途離開一段時間,那么非法用戶可能會修改密碼。由參數(shù)password_require_current控制。
2、配置
Innodb表必須有主鍵。在用戶沒有指定主鍵時,系統(tǒng)會生成一個默認的主鍵。但是在主從復制的場景下,默認的主鍵,會對叢庫應(yīng)用速度帶來致命的影響。如果設(shè)置sql_require_primary_key,那么數(shù)據(jù)庫會強制用戶在創(chuàng)建表、修改表時,加上主鍵。
3、字段默認值
BLOB、TEXT、GEOMETRY和JSON字段可以指定默認值了。
4、優(yōu)化器
1)Skip Scan
非前綴索引也可以用了。
之前的版本,任何沒有帶上f1字段的查詢,都沒法使用索引。在新的版本中,它可以忽略前面的字段,讓這個查詢使用到索引。其實現(xiàn)原理就是把(f1 = 1 AND f2 40) 和(f1 = 2 AND f2 40)的查詢結(jié)果合并。
2)函數(shù)索引
之前版本只能基于某個列或者多個列加索引,但是不允許在上面做計算,如今這個限制消除了。
5、SQL語法
GROUP BY ASC和GROUP BY DESC語法已經(jīng)被廢棄,要想達到類似的效果,請使用GROUP BY ORDER BY ASC和GROUP BY ORDER BY DESC。
6、功能變化
1)設(shè)置用戶變量,請使用SET語句
如下類型語句將要被廢棄SELECT @var, @var:=@var+1。
2)新增innodb_fsync_threshold
該變量是控制文件刷新到磁盤的速率,防止磁盤在短時間內(nèi)飽和。
3)新增會話級臨時表空間
在以往的版本中,當執(zhí)行SQL時,產(chǎn)生的臨時表都在全局表空間ibtmp1中,及時執(zhí)行結(jié)束,臨時表被釋放,空間不會被回收。新版本中,會為session從臨時表空間池中分配一個臨時表空間,當連接斷開時,臨時表空間的磁盤空間被回收。
4)在線切換Group Replication的狀態(tài)
5)新增了group_replication_member_expel_timeout
之前,如果某個節(jié)點被懷疑有問題,在5秒檢測期結(jié)束之后,那么就直接被驅(qū)逐出這個集群。即使該節(jié)點恢復正常時,也不會再被加入集群。那么,瞬時的故障,會把某些節(jié)點驅(qū)逐出集群。
group_replication_member_expel_timeout讓管理員能更好的依據(jù)自身的場景,做出最合適的配置(建議配置時間小于一個小時)。
MariaDB 10.3版本功能展示
1、MariaDB 10.3支持update多表ORDER BY and LIMIT
1)update連表更新,limit語句
update t1 join t2 on t1.id=t2.id set t1.name='hechunyang' limit 3;
MySQL 8.0直接報錯
MariaDB 10.3更新成功
2)update連表更新,ORDER BY and LIMIT語句
update t1 join t2 on t1.id=t2.id set t1.name='HEchunyang' order by t1.id DESC limit 3;
MySQL 8.0直接報錯
MariaDB 10.3更新成功
參考:
2、MariaDB10.3增補AliSQL補丁——安全執(zhí)行Online DDL
Online DDL從名字上看很容易誤導新手,以為不論什么情況,修改表結(jié)構(gòu)都不會鎖表,理想很豐滿,現(xiàn)實很骨感,注意這個坑!
有以下兩種情況執(zhí)行DDL操作會鎖表的,Waiting for table metadata lock(元數(shù)據(jù)表鎖):
針對第二種情況,MariaDB10.3增補AliSQL補丁-DDL FAST FAIL,讓其DDL操作快速失敗。
例:
如果線上有某個慢SQL對該表進行操作,可以使用WAIT n(以秒為單位設(shè)置等待)或NOWAIT在語句中顯式設(shè)置鎖等待超時,在這種情況下,如果無法獲取鎖,語句將立即失敗。 WAIT 0相當于NOWAIT。
參考:
3、MariaDB Window Functions窗口函數(shù)分組取TOP N記錄
窗口函數(shù)在MariaDB10.2版本里實現(xiàn),其簡化了復雜SQL的撰寫,提高了可讀性。
參考:
Percona Server發(fā)布8.0 GA版本
2018年12月21日,Percona發(fā)布了Percona Server 8.0 GA版本。
在支持MySQL8.0社區(qū)的基礎(chǔ)版上,Percona Server for MySQL 8.0版本中帶來了許多新功能:
1、安全性和合規(guī)性
2、性能和可擴展性
3、可觀察性和可用性
Percona Server for MySQL 8.0中將要被廢用功能:
Percona Server for MySQL 8.0中刪除的功能:
RocksDB發(fā)布V5.17.2版本
2018年10月24日,RocksDB發(fā)布V5.17.2版本。
RocksDB是Facebook在LevelDB基礎(chǔ)上用C++寫的高效內(nèi)嵌式K/V存儲引擎。相比LevelDB,RocksDB提供了Column-Family,TTL,Transaction,Merge等方面的支持。目前MyRocks,TiKV等底層的存儲都是基于RocksDB來構(gòu)建。
PostgreSQL發(fā)布11版本
2018年10月18日,PostgreSQL 11發(fā)布。
1、PostgreSQL 11的重大增強
2、PostgreSQL 插件動態(tài)
1)分布式插件citus發(fā)布 8.1
citus是PostgreSQL的一款sharding插件,目前國內(nèi)蘇寧、鐵總、探探有較大量使用案例。
2)地理信息插件postgis發(fā)布2.5.1
PostGIS是專業(yè)的時空數(shù)據(jù)庫插件,在測繪、航天、氣象、地震、國土資源、地圖等時空專業(yè)領(lǐng)域應(yīng)用廣泛。同時在互聯(lián)網(wǎng)行業(yè)也得到了對GIS有性能、功能深度要求的客戶青睞,比如共享出行、外賣等客戶。
3)時序插件timescale發(fā)布1.1.1
timescale是PostgreSQL的一款時序數(shù)據(jù)庫插件,在IoT行業(yè)中有非常好的應(yīng)用。github star數(shù)目前有5000多,是一個非?;鸨牟寮?。
4)流計算插件 pipelinedb 正式插件化
Pipelinedb是PostgreSQL的一款流計算插件,使用這個創(chuàng)建可以對高速寫入的數(shù)據(jù)進行實時根據(jù)定義的聚合規(guī)則進行聚合(支持概率計算),實時根據(jù)定義的規(guī)則觸發(fā)事件(支持事件處理函數(shù)的自定義)??捎糜贗oT,監(jiān)控,F(xiàn)EED實時計算等場景。
3、PostgreSQL衍生開源產(chǎn)品動態(tài)
1)agensgraph發(fā)布 2.0.0版本
agensgraph是兼容PostgreSQL、opencypher的專業(yè)圖數(shù)據(jù)庫,適合圖式關(guān)系的管理。
2)gpdb發(fā)布5.15
gpdb是兼容PostgreSQL的mpp數(shù)據(jù)庫,適合OLAP場景。近兩年,gpdb一直在追趕PostgreSQL的社區(qū)版本,預計很快會追上10的PostgreSQL,在TP方面的性能也會得到顯著提升。
3)antdb發(fā)布3.2
antdb是以Postgres-XC為基礎(chǔ)開發(fā)的一款PostgreSQL sharding數(shù)據(jù)庫,亞信主導開發(fā),開源,目前主要服務(wù)于亞信自有客戶。
4)遷移工具MTK發(fā)布52版本
MTK是EDB提供的可以將Oracle、PostgreSQL、MySQL、MSSQL、Sybase數(shù)據(jù)庫遷移到PostgreSQL, PPAS的產(chǎn)品,遷移速度可以達到100萬行/s以上。
DB2發(fā)布 11.1.4.4版本
DB2最新發(fā)布Mod Pack 4 and Fix Pack 4,包含以下幾方面的改動及增強:
1、性能
2、高可用
3、管理視圖
4、應(yīng)用開發(fā)方面
5、聯(lián)邦功能
6、pureScale
NoSQL家族
Redis發(fā)布5.0.3版本
MongoDB升級更新MongoDB Mobile和MongoDB Stitch
2018年11月21日,MongoDB升級更新MongoDB Mobile和MongoDB Stitch,助力開發(fā)人員提升工作效率。
MongoDB 公司日前發(fā)布了多項新產(chǎn)品功能,旨在更好地幫助開發(fā)人員在世界各地管理數(shù)據(jù)。通過利用存儲在移動設(shè)備和后臺數(shù)據(jù)庫的數(shù)據(jù)之間的實時、自動的同步特性,MongoDB Mobile通用版本助力開發(fā)人員構(gòu)建更快捷、反應(yīng)更迅速的應(yīng)用程序。此前,這只能通過在移動應(yīng)用內(nèi)部安裝一個可供選擇或限定功能的數(shù)據(jù)庫來實現(xiàn)。
MongoDB Mobile在為客戶提供隨處運行的自由度方面更進了一步。用戶在iOS和安卓終端設(shè)備上可擁有MongoDB所有功能,將網(wǎng)絡(luò)邊界擴展到其物聯(lián)網(wǎng)資產(chǎn)范疇。應(yīng)用系統(tǒng)還可以使用MongoDB Stitch的軟件開發(fā)包訪問移動客戶端或后臺數(shù)據(jù),幫助開發(fā)人員通過他們希望的任意方式查詢移動終端數(shù)據(jù)和物聯(lián)網(wǎng)數(shù)據(jù),包括本地讀寫、本地JSON存儲、索引和聚合。通過Stitch移動同步功能(現(xiàn)可提供beta版),用戶可以自動對保存在本地的數(shù)據(jù)以及后臺數(shù)據(jù)庫的數(shù)據(jù)進行同步。
本期新秀:Cassandra發(fā)布3.11.3版本
2018年8月11日,Cassandra發(fā)布正式版3.11.3。
Apache Cassandra是一款開源分布式NoSQL數(shù)據(jù)庫系統(tǒng),使用了基于Google BigTable的數(shù)據(jù)模型,與面向行(row)的傳統(tǒng)關(guān)系型數(shù)據(jù)庫或鍵值存儲key-value數(shù)據(jù)庫不同,Cassandra使用的是寬列存儲模型(Wide Column Stores)。與BigTable和其模仿者HBase不同,數(shù)據(jù)并不存儲在分布式文件系統(tǒng)如GFS或HDFS中,而是直接存于本地。
Cassandra的系統(tǒng)架構(gòu)與Amazon DynamoDB類似,是基于一致性哈希的完全P2P架構(gòu),每行數(shù)據(jù)通過哈希來決定應(yīng)該存在哪個或哪些節(jié)點中。集群沒有master的概念,所有節(jié)點都是同樣的角色,徹底避免了整個系統(tǒng)的單點問題導致的不穩(wěn)定性,集群間的狀態(tài)同步通過Gossip協(xié)議來進行P2P的通信。
3.11.3版本的一些bug fix和改進:
NewSQL家族
TiDB 發(fā)布2.1.2版本
2018 年 12 月 22 日,TiDB 發(fā)布 2.1.2 版,TiDB-Ansible 相應(yīng)發(fā)布 2.1.2 版本。該版本在 2.1.1 版的基礎(chǔ)上,對系統(tǒng)兼容性、穩(wěn)定性做出了改進。
TiDB 是一款定位于在線事務(wù)處理/在線分析處理( HTAP: Hybrid Transactional/Analytical Processing)的融合型數(shù)據(jù)庫產(chǎn)品。除了底層的 RocksDB 存儲引擎之外,分布式SQL層、分布式KV存儲引擎(TiKV)完全自主設(shè)計和研發(fā)。
TiDB 完全開源,兼容MySQL協(xié)議和語法,可以簡單理解為一個可以無限水平擴展的MySQL,并且提供分布式事務(wù)、跨節(jié)點 JOIN、吞吐和存儲容量水平擴展、故障自恢復、高可用等優(yōu)異的特性;對業(yè)務(wù)沒有任何侵入性,簡化開發(fā),利于維護和平滑遷移。
TiDB:
PD:
TiKV:
Tools:
1)TiDB-Lightning
2)TiDB-Binlog
EsgynDB發(fā)布R2.5版本
2018年12月22日,EsgynDB R2.5版本正式發(fā)布。
作為企業(yè)級產(chǎn)品,EsgynDB 2.5向前邁進了一大步,它擁有以下功能和改進:
CockroachDB發(fā)布2.1版本
2018年10月30日,CockroachDB正式發(fā)布2.1版本,其新增特性如下:
新增企業(yè)級特性:
新增SQL特性:
新增內(nèi)核特性:
Admin UI增強:
時間序列
本期新秀:TimescaleDB發(fā)布1.0版本
10月底,TimescaleDB 1.0宣布正式推出,官方表示該版本已可用于生產(chǎn)環(huán)境,支持完整SQL和擴展。
TimescaleDB是基于PostgreSQL數(shù)據(jù)庫開發(fā)的一款時序數(shù)據(jù)庫,以插件化的形式打包提供,隨著PostgreSQL的版本升級而升級,不會因為另立分支帶來麻煩。
TimescaleDB架構(gòu):
數(shù)據(jù)自動按時間和空間分片(chunk)
更新亮點:
大數(shù)據(jù)生態(tài)圈
Hadoop發(fā)布2.9.2版本
2018年11月中旬,Hadoop在2.9分支上發(fā)布了新的2.9.2版本,該版本進行了204個大大小小的變更,主要變更如下:
Greenplum 發(fā)布5.15版本
Greenplum最新的5.15版本中發(fā)布了流式數(shù)據(jù)加載工具。
該版本中的Greenplum Streem Server組件已經(jīng)集成了Kafka流式加載功能,并通過了Confluent官方的集成認證,其支持的主要功能如下:
國產(chǎn)數(shù)據(jù)庫概覽
K-DB發(fā)布數(shù)據(jù)庫一體機版
2018年11月7日,K-DB發(fā)布了數(shù)據(jù)庫一體機版。該版本更新情況如下:
OceanBase遷移服務(wù)發(fā)布1.0版本
1月4日,OceanBase 正式發(fā)布OMS遷移服務(wù)1.0版本。
以下內(nèi)容包含 OceanBase 遷移服務(wù)的重要特性和功能:
SequoiaDB發(fā)布3.0.1新版本
1、架構(gòu)
1)完整計算存儲分離架構(gòu),兼容MySQL協(xié)議、語法
計算存儲分離體系以松耦合的方式將計算與存儲層分別部署,通過標準接口或插件對各個模塊和組件進行無縫替換,在計算層與存儲層均可實現(xiàn)自由的彈性伸縮。
SequoiaDB巨杉數(shù)據(jù)庫“計算-存儲分離”架構(gòu)詳細示意
用戶可以根據(jù)自身業(yè)務(wù)特征選擇面向交易的SQL解析器(例如MySQL或PGSQL)或面向統(tǒng)計分析的執(zhí)行引擎(例如SparkSQL)。眾所周知,使用不同的SQL優(yōu)化與執(zhí)行方式,數(shù)據(jù)庫的訪問性能可能會存在上千上萬倍的差距。計算存儲分離的核心思想便是在數(shù)據(jù)存儲層面進行一體化存儲,在計算層面則利用每種執(zhí)行引擎的特點針對不同業(yè)務(wù)場景進行選擇和優(yōu)化,用戶可以在存儲層進行邏輯與物理的隔離,將面向高頻交易的前端業(yè)務(wù)與面向高吞吐量的統(tǒng)計分析使用不同的硬件進行存儲,確保在多類型數(shù)據(jù)訪問時互不干擾,以真正達到生產(chǎn)環(huán)境可用的多租戶與HTAP能力。
2、其他更新信息
1)接口變更:
2)主要特性:
云數(shù)據(jù)庫
本期新秀:騰訊發(fā)布數(shù)據(jù)庫CynosDB,開啟公測
1、News
1)騰訊云數(shù)據(jù)庫MySQL2018年重大更新:
2)騰訊云數(shù)據(jù)庫MongoDB2018年重大更新:
3)騰訊云數(shù)據(jù)庫Redis/CKV+2018年重大更新:
4)騰訊云數(shù)據(jù)庫CTSDB2018年重大更新:
2、Redis 4.0集群版商業(yè)化上線
2018年10月,騰訊云數(shù)據(jù)庫Redis 4.0集群版完成邀測、公測、商業(yè)化三個迭代,在廣州、上海、北京正式全量商業(yè)化上線。
產(chǎn)品特性:
使用場景:
官網(wǎng)文檔:
3、騰訊自研數(shù)據(jù)庫CynosDB發(fā)布,開啟公測
2018年11月22日,騰訊云召開新一代自研數(shù)據(jù)庫CynosDB發(fā)布會,業(yè)界第一款全面兼容市面上兩大最主流的開源數(shù)據(jù)庫MySQL和PostgreSQL的高性能企業(yè)級分布式云數(shù)據(jù)庫。
本期新秀:京東云DRDS發(fā)布1.0版本
12月24日,京東云分布式關(guān)系型數(shù)據(jù)庫DRDS正式發(fā)布1.0版本。
DRDS是京東云精心自研的數(shù)據(jù)庫中間件產(chǎn)品,獲得了2018年 ”可信云技術(shù)創(chuàng)新獎”。DRDS可實現(xiàn)海量數(shù)據(jù)下的自動分庫分表,具有高性能,分布式,彈性升級,兼容MySQL等優(yōu)點,適用于高并發(fā)、大規(guī)模數(shù)據(jù)的在線交易, 歷史 數(shù)據(jù)查詢,自動數(shù)據(jù)分片等業(yè)務(wù)場景,歷經(jīng)多次618,雙十一的考驗,已經(jīng)在京東集團內(nèi)大規(guī)模使用。
京東云DRDS產(chǎn)品有以下主要特性
1)自動分庫分表
通過簡單的定義即可自動實現(xiàn)分庫分表,將數(shù)據(jù)實際存放在多個MySQL實例的數(shù)據(jù)庫中,但呈現(xiàn)給應(yīng)用程序的依舊是一張表,對業(yè)務(wù)透明,應(yīng)用程序幾乎無需改動,實現(xiàn)了對數(shù)據(jù)庫存儲和處理能力的水平擴展。
2)分布式架構(gòu)
基于分布式架構(gòu)的集群方案,多個對等節(jié)點同時對外提供服務(wù),不但可有效規(guī)避服務(wù)的單點故障,而且更加容易擴展。
3)超強性能
具有極高的處理能力,雙節(jié)點即可支持數(shù)萬QPS,滿足用戶超大規(guī)模處理能力的需求。
4)兼容MySQL
兼容絕大部分MySQL語法,包括MySQL語法、數(shù)據(jù)類型、索引、常用函數(shù)、排序、關(guān)聯(lián)等DDL,DML語句,使用成本低。
參考鏈接:
RadonDB發(fā)布1.0.3版本
2018年12月26日,MyNewSQL領(lǐng)域的RadonDB云數(shù)據(jù)庫發(fā)布1.0.3版本。
推出dbaplus Newsletter的想法
dbaplus Newsletter旨在向廣大技術(shù)愛好者提供數(shù)據(jù)庫行業(yè)的最新技術(shù)發(fā)展趨勢,為社區(qū)的技術(shù)發(fā)展提供一個統(tǒng)一的發(fā)聲平臺。為此,我們策劃了RDBMS、NoSQL、NewSQL、時間序列、大數(shù)據(jù)生態(tài)圈、國產(chǎn)數(shù)據(jù)庫、云數(shù)據(jù)庫等幾個版塊。
我們不以商業(yè)宣傳為目的,不接受任何商業(yè)廣告宣傳,嚴格審查信息源的可信度和準確性,力爭為大家提供一個純凈的技術(shù)學習環(huán)境,歡迎大家監(jiān)督指正。
至于Newsletter發(fā)布的周期,目前計劃是每三個月左右會做一次跟進, 下期計劃時間是2019年4月14日~4月25日, 如果有相關(guān)的信息提供請發(fā)送至郵箱:newsletter@dbaplus.cn
感謝名單
最后要感謝那些提供寶貴信息和建議的專家朋友,排名不分先后。
往期回顧:
↓↓別忘了點這里下載 2019年1月 完整版Newsletter 哦~
而傳統(tǒng)的關(guān)系數(shù)據(jù)庫在應(yīng)付web2.0網(wǎng)站,特別是超大規(guī)模和高并發(fā)的SNS類型的web2.0純動態(tài)網(wǎng)站已經(jīng)顯得力不從心,暴露了很多難以克服的問題,例如:
1、High performance - 對數(shù)據(jù)庫高并發(fā)讀寫的需求
web2.0網(wǎng)站要根據(jù)用戶個性化信息來實時生成動態(tài)頁面和提供動態(tài)信息,所以基本上無法使用動態(tài)頁面靜態(tài)化技術(shù),因此數(shù)據(jù)庫并發(fā)負載非常高,往往要達到每秒上萬次讀寫請求。關(guān)系數(shù)據(jù)庫應(yīng)付上萬次SQL查詢還勉強頂?shù)米?,但是?yīng)付上萬次SQL寫數(shù)據(jù)請求,硬盤IO就已經(jīng)無法承受了。其實對于普通的BBS網(wǎng)站,往往也存在對高并發(fā)寫請求的需求。
2、Huge Storage - 對海量數(shù)據(jù)的高效率存儲和訪問的需求
對于大型的SNS網(wǎng)站,每天用戶產(chǎn)生海量的用戶動態(tài),以國外的Friendfeed為例,一個月就達到了2.5億條用戶動態(tài),對于關(guān)系數(shù)據(jù)庫來說,在一張2.5億條記錄的表里面進行SQL查詢,效率是極其低下乃至不可忍受的。再例如大型web網(wǎng)站的用戶登錄系統(tǒng),例如騰訊,盛大,動輒數(shù)以億計的帳號,關(guān)系數(shù)據(jù)庫也很難應(yīng)付。
3、High Scalability High Availability- 對數(shù)據(jù)庫的高可擴展性和高可用性的需求
在基于web的架構(gòu)當中,數(shù)據(jù)庫是最難進行橫向擴展的,當一個應(yīng)用系統(tǒng)的用戶量和訪問量與日俱增的時候,你的數(shù)據(jù)庫卻沒有辦法像web server和app server那樣簡單的通過添加更多的硬件和服務(wù)節(jié)點來擴展性能和負載能力。對于很多需要提供24小時不間斷服務(wù)的網(wǎng)站來說,對數(shù)據(jù)庫系統(tǒng)進行升級和擴展是非常痛苦的事情,往往需要停機維護和數(shù)據(jù)遷移,為什么數(shù)據(jù)庫不能通過不斷的添加服務(wù)器節(jié)點來實現(xiàn)擴展呢?
在上面提到的“三高”需求面前,關(guān)系數(shù)據(jù)庫遇到了難以克服的障礙,而對于web2.0網(wǎng)站來說,關(guān)系數(shù)據(jù)庫的很多主要特性卻往往無用武之地,例如:
1、數(shù)據(jù)庫事務(wù)一致性需求
很多web實時系統(tǒng)并不要求嚴格的數(shù)據(jù)庫事務(wù),對讀一致性的要求很低,有些場合對寫一致性要求也不高。因此數(shù)據(jù)庫事務(wù)管理成了數(shù)據(jù)庫高負載下一個沉重的負擔。
2、數(shù)據(jù)庫的寫實時性和讀實時性需求
對關(guān)系數(shù)據(jù)庫來說,插入一條數(shù)據(jù)之后立刻查詢,是肯定可以讀出來這條數(shù)據(jù)的,但是對于很多web應(yīng)用來說,并不要求這么高的實時性。
3、對復雜的SQL查詢,特別是多表關(guān)聯(lián)查詢的需求
任何大數(shù)據(jù)量的web系統(tǒng),都非常忌諱多個大表的關(guān)聯(lián)查詢,以及復雜的數(shù)據(jù)分析類型的復雜SQL報表查詢,特別是SNS類型的網(wǎng)站,從需求以及產(chǎn)品設(shè)計角度,就避免了這種情況的產(chǎn)生。往往更多的只是單表的主鍵查詢,以及單表的簡單條件分頁查詢,SQL的功能被極大的弱化了。
因此,關(guān)系數(shù)據(jù)庫在這些越來越多的應(yīng)用場景下顯得不那么合適了,為了解決這類問題的非關(guān)系數(shù)據(jù)庫應(yīng)運而生。
NoSQL 是非關(guān)系型數(shù)據(jù)存儲的廣義定義。它打破了長久以來關(guān)系型數(shù)據(jù)庫與ACID理論大一統(tǒng)的局面。NoSQL 數(shù)據(jù)存儲不需要固定的表結(jié)構(gòu),通常也不存在連接操作。在大數(shù)據(jù)存取上具備關(guān)系型數(shù)據(jù)庫無法比擬的性能優(yōu)勢。該術(shù)語在 2009 年初得到了廣泛認同。
當今的應(yīng)用體系結(jié)構(gòu)需要數(shù)據(jù)存儲在橫向伸縮性上能夠滿足需求。而 NoSQL 存儲就是為了實現(xiàn)這個需求。Google 的BigTable與Amazon的Dynamo是非常成功的商業(yè) NoSQL 實現(xiàn)。一些開源的 NoSQL 體系,如Facebook 的Cassandra, Apache 的HBase,也得到了廣泛認同。
騰訊的云服務(wù)器是具有獨立操作系統(tǒng)的,在購買騰訊云服務(wù)器時候,需要選擇云服務(wù)器的系統(tǒng),可以根據(jù)自己熟悉的選擇。云服務(wù)器的系統(tǒng)主要分為兩大類(Linux和Windows系統(tǒng))。
注:centos、suse、Ubuntu都是Linux系統(tǒng),只是界面和操作方法略有不同。
選擇云服務(wù)器系統(tǒng),可以參考網(wǎng)站程序編碼和自己對系統(tǒng)使用的熟悉程度:
1.如果平時沒有接觸過Linux下敲命令操作系統(tǒng)(類似win下面的DOS),建議選擇Windows sever系統(tǒng)。
2.如果網(wǎng)站是php+MySQL架構(gòu)的,建議首選Linux系統(tǒng),運行更穩(wěn)定,Windows也可以運行,沒有Linux系統(tǒng)下運行高效。
3.如果網(wǎng)站是asp、asp.net+SqlServer架構(gòu),必須使用Windows系統(tǒng)的云服務(wù)器才能搭建運行環(huán)境。
擴展資料:
云服務(wù)器的業(yè)內(nèi)名稱其實叫做計算單元。所謂計算單元,就是說這個服務(wù)器只能算是一個人的大腦,相當于普通電腦的CPU,里面的資源都是有限的。你要獲得更好的性能,解決辦法一是升級云服務(wù)器,二是將其它耗費計算單元資源的軟件部署在對應(yīng)的云服務(wù)上。例如數(shù)據(jù)庫有專門的云數(shù)據(jù)庫服務(wù)、靜態(tài)網(wǎng)頁和圖片有專門的文件存儲服務(wù)。
而且云服務(wù)器不是說就便宜了,相反會比一般的VPS都貴。為什么?因為它相對于來說,擴展比較方便。云服務(wù)器是網(wǎng)站做大了、有很高收入的時候一個不錯的選擇。
云服務(wù)器是云計算服務(wù)的重要組成部分,是面向各類互聯(lián)網(wǎng)用戶提供綜合業(yè)務(wù)能力的服務(wù)平臺。平臺整合了傳統(tǒng)意義上的互聯(lián)網(wǎng)應(yīng)用三大核心要素:計算、存儲、網(wǎng)絡(luò),面向用戶提供公用化的互聯(lián)網(wǎng)基礎(chǔ)設(shè)施服務(wù)。
云服務(wù)器服務(wù)包括兩個核心產(chǎn)品:
1、面向中小企業(yè)用戶與高端用戶的云服務(wù)器租用服務(wù);
2面向大中型互聯(lián)網(wǎng)用戶的彈性計算平臺服務(wù)。
云服務(wù)器平臺的每個集群節(jié)點被部署在互聯(lián)網(wǎng)的骨干數(shù)據(jù)中心,可獨立提供計算、存儲、在線備份、托管、帶寬等互聯(lián)網(wǎng)基礎(chǔ)設(shè)施服務(wù)。
參考資料:百度百科--云服務(wù)器
當前名稱:騰訊nosql,騰訊體育
文章URL:http://www.rwnh.cn/article46/dssdgeg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站排名、App開發(fā)、移動網(wǎng)站建設(shè)、網(wǎng)站導航、定制網(wǎng)站、小程序開發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)