數據存儲方案評估標準RDBMSorKV
來源:懂視網
責編:小采
時間:2020-11-09 14:10:09
數據存儲方案評估標準RDBMSorKV
數據存儲方案評估標準RDBMSorKV:本文主要介紹常見的數據存儲方案及相應選型的評估標準的介紹。 Guideline:針對不同應用場景,針對性選擇存儲方式。 1. 數據存儲方案 SQL: MySQL 5.5/5.6/MariaDB(對于Dev絕大多數場景下透明);Oracle|MS SQL暫不考慮; NoSQL: Memcach
導讀數據存儲方案評估標準RDBMSorKV:本文主要介紹常見的數據存儲方案及相應選型的評估標準的介紹。 Guideline:針對不同應用場景,針對性選擇存儲方式。 1. 數據存儲方案 SQL: MySQL 5.5/5.6/MariaDB(對于Dev絕大多數場景下透明);Oracle|MS SQL暫不考慮; NoSQL: Memcach

本文主要介紹常見的數據存儲方案及相應選型的評估標準的介紹。 Guideline:針對不同應用場景,針對性選擇存儲方式。 1. 數據存儲方案 SQL: MySQL 5.5/5.6/MariaDB(對于Dev絕大多數場景下透明);Oracle|MS SQL暫不考慮; NoSQL: Memcached 1.4.21;Redis 2.
本文主要介紹常見的數據存儲方案及相應選型的評估標準的介紹。
Guideline:針對不同應用場景,針對性選擇存儲方式。
1. 數據存儲方案
SQL:
MySQL 5.5/5.6/MariaDB(對于Dev絕大多數場景下透明);
Oracle|MS SQL暫不考慮;
NoSQL:
Memcached 1.4.21;
Redis 2.8;
MongoDB 2.6.6;
Hbase 0.96/0.98;
2. 評估標準
RDBMS:(MySQL):
要求數據持久化存儲;用戶提交數據就不能丟失;
要求事務保證;
應用復雜,數據結構復雜,數據一致性要求高;
分布式實現時復雜度高,分庫分表代價較大。
適合需要嚴格事務保證的OLTP類系統和MIS類系統;
典型場景:
以電商網站為例,
所有后端子系統(比如ERP,物流,財務,倉儲,人事,VIS等);
網站核心數據存儲(比如用戶,商品,庫存,購物車,訂單);
KV(Memcache/Redis):
數據結構簡單;只是按照簡單的Key來查詢和update記錄;
數據不需要持久化存儲(persistent on disk), 是secondary data;一般不是用戶直接寫入;(比如由后端job生成,可以由應用實現雙寫)
不需要transaction事務支持;
可能有很高的QPS/TPS(for example, 10k+ query/transaction per second);
有非常高的響應速度要求(<1ms typically),以redis為例,同機房操作一般都是幾十微秒級別;
典型場景:
各類計數器;
各類cache層(商品列表頁,各類配置信息,商品描述信息等);
Analytics Platform:
Hadoop:ETL;科學分析;
GP:BI分析;各類報表;
Hbase:在線系統;OLAP分析;
DocDB:應用相對簡單,數據結構相對復雜,支持快速開發,非事務類處理的信息處理系統。如知識問答、社區等;
3. 性能優化
已有系統碰到性能瓶頸時,優化次序依次為:
容量評估
性能優化(系統優化,代碼邏輯優化,SQL優化)
硬件升級(從低端硬件到高端硬件,從低端存儲到高端存儲)
垂直拆分(按照不同的模塊拆分數據庫)
水平拆分(對某個模塊,在系統里面再也跑不動,就需要對該模塊按照主鍵或者其他邏輯拆分)
聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com
數據存儲方案評估標準RDBMSorKV
數據存儲方案評估標準RDBMSorKV:本文主要介紹常見的數據存儲方案及相應選型的評估標準的介紹。 Guideline:針對不同應用場景,針對性選擇存儲方式。 1. 數據存儲方案 SQL: MySQL 5.5/5.6/MariaDB(對于Dev絕大多數場景下透明);Oracle|MS SQL暫不考慮; NoSQL: Memcach