成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Redis 架構和運維必懂的10個知識

存儲 存儲軟件 Redis
Redis 是一個開源的使用 ANSI C 語言編寫、支持網絡、可基于內存亦可持久化的日志型、Key-Value 數據庫,并提供多種語言的 API。

 Redis 是一個開源的使用 ANSI C 語言編寫、支持網絡、可基于內存亦可持久化的日志型、Key-Value 數據庫,并提供多種語言的 API。

如今,互聯網業務的數據正以更快的速度在增長,數據類型越來越豐富,這對數據處理的速度和能力提出了更高要求。Redis 是一種開源的內存非關系型數據庫,給開發人員帶來的體驗是顛覆性的。在自始至終的設計過程中,都充分考慮高性能,這使得 Redis 成為當今速度最快的 NoSQL 數據庫。

[[253006]]

考慮高性能的同時,高可用也是很重要的考慮因素。互聯網 7x24 無間斷服務,在故障期間以最快的速度 Failover,能給企業帶來最小的損失。

那么,在實際應用中,都有哪些高可用架構呢?架構之間有何優劣?我們應該怎么取舍?有哪些***實踐?以下四個方面十個具有典型性和普遍性問題的解答,可以作為了解 Redis 高可用及 Redis 運維的參考。

一、高可用相關

1:Redis 常用高可用架構有哪些?

Redis 高可用架構如下:

  • Redis Sentinel 集群 + 內網 DNS + 自定義腳本
  • Redis Sentinel 集群 + VIP + 自定義腳本
  • 封裝客戶端直連 Redis Sentinel 端口

JedisSentinelPool,適合 Java

PHP 基于 phpredis 自行封裝

  • Redis Sentinel 集群 + Keepalived/Haproxy
  • Redis M/S + Keepalived
  • Redis Cluster
  • Twemproxy
  • Codis

2:Redis 高可用架構優劣對比?

—Redis Sentinel 集群 + 內網 DNS + 自定義腳本

優點:

  • 秒級切換
  • 腳本自定義,架構可控
  • 對應用透明

缺點:

  • 維護成本略高
  • 依賴 DNS,存在解析延時
  • Sentinel 模式存在短時間的服務不可用

—Redis Sentinel 集群 + VIP + 自定義腳本

優點:

  • 秒級切換
  • 腳本自定義,架構可控
  • 對應用透明

缺點:

  • 維護成本略高
  • Sentinel 模式存在短時間的服務不可用

—封裝客戶端直連 Redis Sentinel 端口

優點:

  • 服務探測故障及時
  • DBA 維護成本低

缺點:

  • 依賴客戶端支持 Sentinel
  • Sentinel 服務器需要開放訪問權限
  • 對應用有侵入性

—Redis Sentinel 集群 + Keepalived/Haproxy

優點:

  • 秒級切換
  • 對應用透明

缺點:

  • 維護成本高
  • 存在腦裂
  • Sentinel 模式存在短時間的服務不可用

—Redis M/S +Keepalived

優點:

  • 秒級切換
  • 對應用透明
  • 部署簡單,維護成本低

缺點:

  • 需要腳本實現切換功能
  • 存在腦裂
  • (Redis Cluster、Twemproxy、Codis 優劣對比見下個問題)

3:常見的 Redis 集群方案有哪些優缺點?

Twemproxy:

 

多個同構 Twemproxy(配置相同)同時工作,接受客戶端的請求,根據 hash 算法,轉發給對應的 Redis。

優點:

  • 開發簡單,對應用幾乎透明
  • 歷史悠久,方案成熟

缺點:

  • 代理影響性能
  • LVS 和 Twemproxy 會有節點性能瓶頸
  • Redis 擴容非常麻煩
  • Twitter 內部已放棄使用該方案,新使用的架構未開源

Codis:

  • ZooKeeper

存放路由表和代理節點元數據

分發Codis-Config的命令

  • Codis-Config 集成管理工具,有web界面
  • Codis-Proxy

無狀態代理,兼容Redis協議

對業務透明

  • Codis-Redis

基于2.8版本,二次開發

加入slot支持和遷移命令

優點:

  • 開發簡單,對應用幾乎透明
  • 性能比 Twemproxy 好
  • 有圖形化界面,擴容容易,運維方便

缺點:

  • 代理依舊影響性能
  • 組件過多,需要很多機器資源
  • 修改了 Redis 代碼,導致和官方無法同步,新特性跟進緩慢
  • 開發團隊準備主推基于 Redis 改造的 reborndb

Redis Cluster:

P2P模式,無中心化。把 key 分成 16384 個 slot,每個實例負責一部分 slot。客戶端請求若不在連接的實例,該實例會轉發給對應的實例。通過Gossip協議同步節點信息。

優點:

  • 組件 all-in-box,部署簡單,節約機器資源
  • 性能比 proxy 模式好
  • 自動故障轉移、Slot 遷移中數據可用
  • 官方原生集群方案,更新與支持有保障

缺點:

  • 架構比較新,***實踐較少
  • 多鍵操作支持有限(驅動可以曲線救國)
  • 為了性能提升,客戶端需要緩存路由表信息
  • 節點發現、reshard 操作不夠自動化

二、Redis 通用

1:Redis 相對 MySQL、PostgreSQL 這些關系型數據庫,有什么優缺點?

觀點一:

Redis 主要是用來做緩存,它有持久化,但也只是為了緩存的可靠而已。優點是數據全放內存,速度快。缺點就是,數據大小不能超過內存大小。兩個用在不同業務場景,Redis 無法取代傳統關系型數據庫。

觀點二:

Redis 首先它是一種內存數據庫,***的優勢在于效率高。尤其在某些特定場合下,例如熱點數據量非常大,而數據從內存和磁盤之間的換入換出代價比較高的情況下,Redis 就會體現它的價值。

傳統關系型數據庫在于它對數據的一致性保障,它的數據模型范式是遵循嚴格事務規則的結構化數據,由于其數據的高度抽象化,它調度到內存的數據一般場合下不會占用很大的內存空間。

總的來說,兩種數據庫各有各的優點和缺點。不同的業務場合有特定的追求目標,redis 首要的是效率,適用的是一些單純二維結構化數據無法表達的數據模型,而關系型數據庫處理的是可以用范式模型表達的二維數據,追求的是數據的高度一致性。隨著 IT 的發展,每一類型的數據庫都會在其特定的場合內發揮出無可比擬的優勢,最終的趨勢是大家趨于平衡,沒有***,只有最適合。

觀點三:

記住一句話:任何數據庫都有自己的應用場景,應該關注數據流、數據屬性。

個人的經驗來說,Redis 不可能取代 MySQL 或者 PG。

2:Redis 有哪些應用場景,是否可以舉例說明下哪個公司用了?

Redis 是一個高性能的緩存,一般應用在 Session 緩存、隊列、排行榜、計數器、最近最熱文章、最近最熱評論、發布訂閱等。

更多應用場景,可以參考此處。

可以這樣講,Redis 適用于 數據實時性要求高、數據存儲有過期和淘汰特征的、不需要持久化或者只需要保證弱一致性、邏輯簡單的場景。

國內的互聯網公司,據我了解,基本是都在用,其中新浪對 Redis 在國內普及起了重要的作用。

另外,Redis 官網有「Who's using Redis?」的鏈接。

3:新接手一個復雜的 Redis 集群(Sentinel 模式),如何了解它

剛剛接手一套 Redis 集群,想要了解這套集群的相關配置。應該如何入手。難道只能通過 info 命令去查看各個配置嗎?

這是筆者的建議:

  • 通讀 Sentinel 官方文檔:https://redis.io/topics/sentinel
  • Google 搜索 Redis Sentinel,找幾篇中英文的文章看看
  • 進入 Sentinel 集群后,使用 info 查看集群信息
  • 查看 Sentinel 配置文件,配合文檔搞清楚每個參數的含義
  • 使用幾臺虛擬機模擬線上環境,然后做測試,在實踐中深入理解
  • 思考當前 Sentinel 集群是否有不合理的地方,如有,提出并改進

三、Redis 故障排查

1:Redis 實例中,存在大量的 FIN_WAIT2 連接

客戶端 TCP 狀態遷移:

CLOSED->SYN_SENT->ESTABLISHED->FIN_WAIT_1->FIN_WAIT_2->TIME_WAIT->CLOSED

服務器 TCP 狀態遷移:

CLOSED->LISTEN->SYN 收到 ->ESTABLISHED->CLOSE_WAIT->LAST_ACK->CLOSED

這個狀態存在于主動發起斷開請求的一端,如果服務器存在大量的這個狀態,那么這個服務器就充當客戶端的角色,如網絡爬蟲,出現的原因是由于客戶端發起 FIN 請求結束連接之后,收到了服務端的應答之后進入 FIN_WAIT2,之后就沒收到服務端發送的 FIN 信號導致。

PS:線上 Web 客戶端用的什么語言?

此問題的評論值得一看:http://www.aixchina.net/Question/231035-1406575

2:如何知道,當前 Redis 實例是處于阻塞狀態?

請問大神們, 通過什么方式,能夠知道,當前某個 Redis 實例是處于阻塞狀態啊? 能不能通過某個命令查詢出來 ? 求解, 謝謝!

解答一:

隨便 get 一個 key,然后卡著不動就行,簡單粗暴。優雅一點是看 latency 的延遲,blocked_clients 的數量,rejected_connections 的數量等。

解答二:

方法一:登錄 Redis,執行 info,查看 blocked_clients

方法二:執行 redis-cli --latency -h -p 查看延時情況

3:Redis 運維的故障有哪些?

回答一:

常見的運維故障

  • 使用 keys * 把庫堵死,——建議使用別名把這個命令改名
  • 超過內存使用后,部分數據被刪除——這個有刪除策略的,選擇適合自己的即可
  • 沒開持久化,卻重啟了實例,數據全掉——記得非緩存的信息需要打開持久化
  • RDB 的持久化需要 vm.overcommit_memory=1,否則會持久化失敗
  • 沒有持久化情況下,主從,主重啟太快,從還沒認為主掛的情況下,從會清空自己的數據——人為重啟主節點前,先關閉從節點的同步

回答二:

  • 我簡單說下 Redis 故障的排查方法吧。
  • 了解清楚業務數據流是怎么樣的
  • 結合 Redis 監控查看 QPS、緩存***率、內存使用率等信息
  • 確認機器層面的資源是否有異常
  • 故障時及時上機,使用 redis-cli monitor 打印出操作日志,然后分析(事后分析此條失效)
  • 和研發溝通,確認是否有大 Key 在堵塞(大 Key 也可以在日常的巡檢中獲得)
  • 和組內同事溝通,確實是否有誤操作
  • 和運維同事、研發一起排查流量是否正常,是否存在被刷的情況

更多的排查需要對線上系統的分析。

四、Redis 性能優化

1:提高 Redis 內存數據庫的性能,有哪些措施?

這個問題有點偏題了,還是回答下吧。整理下工作中積累的經驗:

  • 根據不同業務選擇數據類型,有必要時對數據結構進行審核,減少數據冗余
  • 精簡鍵名和鍵值,控制鍵值的大小
  • 使用前綴管理好 key
  • 使用 scan 代替 keys,將遍歷 Redis DB 中所有 key 的操作放到客戶端來做
  • 避免使用 O(N) 復雜度的命令
  • 配置使用 ziplist 來優化 list
  • 合理配置 maxmemory
  • 數據量大的情況,做好 key 和 value 的壓縮
  • 利用管道,批量處理命令
  • 根據不同業務選擇短鏈接或者長鏈接
  • 定期使用 redis-cli --big-keys 檢測大 Key
責任編輯:武曉燕 來源: talkwithtrend
相關推薦

2019-07-04 16:22:48

虛擬化運維故障

2019-05-16 09:50:39

負載均衡高可用數據

2023-11-02 10:24:30

KubectlKubernetes

2018-12-28 09:11:28

運維監控開源

2023-04-05 14:37:43

2020-11-11 11:25:27

Redis數據技術

2018-03-28 09:41:25

Redis高可用運維

2020-06-03 15:25:27

運維架構技術

2019-05-15 11:14:22

監控工具運維

2023-06-26 14:31:24

2021-11-29 10:40:41

Linux運維命令

2021-08-30 15:41:13

Kafka運維數據

2020-05-09 14:40:29

UI設計開發

2018-10-24 05:14:11

2021-09-18 10:01:25

運維架構技術

2019-04-17 08:55:45

2020-04-21 10:11:12

運維體系趨勢

2012-08-15 14:58:01

運維架構師

2020-10-30 08:34:58

Kubernetes運維技巧

2022-07-27 11:10:27

Kubectl命令運維
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 青青久久av北条麻妃海外网 | 精品国产一区二区三区四区在线 | 国产在线永久免费 | 亚洲欧美日韩电影 | 成年人免费在线视频 | 91久久久久久久久久久 | 欧美日韩一区在线观看 | 欧美一区二 | 免费黄色成人 | 国产a级毛毛片 | 国产精品欧美一区喷水 | 涩涩99 | 亚洲欧美中文日韩在线v日本 | 日本免费一区二区三区视频 | 中文字幕在线不卡播放 | 国产香蕉视频在线播放 | 日本一区二区三区在线观看 | 国产成人久久久 | 国产成人99久久亚洲综合精品 | 丁香六月激情 | 日日干日日操 | a级免费黄色片 | 国产精品一码二码三码在线 | www.国产一区 | 久久久性色精品国产免费观看 | 国产乱码精品一区二区三区五月婷 | 欧美亚州| 欧美激情一区二区三区 | 狠狠躁18三区二区一区 | 亚洲成年影院 | 亚洲精品乱码久久久久久按摩 | 亚洲国产中文字幕 | 精品国产精品三级精品av网址 | 99国产精品久久久久久久 | 日本中文在线视频 | 天天操天天拍 | 一区二区在线不卡 | 精品久久久久久久久久久 | 欧美一区成人 | 亚洲精品视频在线看 | 在线观看第一页 |