亞太內(nèi)容分發(fā)大會(huì)暨CDN峰會(huì)一直致力于推動(dòng)CDN產(chǎn)業(yè)深度融合發(fā)展和市場(chǎng)普及，現(xiàn)已成為亞太地區(qū)影響力最大的內(nèi)容分發(fā)網(wǎng)絡(luò)盛會(huì)。十年來(lái)，在以阿里云、網(wǎng)宿科技、騰訊云等亞太CDN產(chǎn)業(yè)聯(lián)盟成員孜孜不輟的努力下，CDN產(chǎn)業(yè)已經(jīng)成為基礎(chǔ)性設(shè)施網(wǎng)絡(luò)，以堅(jiān)定的基石之姿，支撐起中國(guó)成為世界最大的互聯(lián)網(wǎng)市場(chǎng)。

隨著全球數(shù)字化、“一帶一路”戰(zhàn)略的推進(jìn)，亞太內(nèi)容分大會(huì)暨CDN峰會(huì)的影響力正在逐漸向全球延伸，同時(shí)也將中國(guó)智造CDN及產(chǎn)業(yè)鏈推廣向全球每一個(gè)角落。

在 6 月 10 日下午舉辦的【對(duì)象存儲(chǔ)論壇】，又拍云存儲(chǔ)技術(shù)負(fù)責(zé)人 黃勵(lì)博帶來(lái)了題為《又拍云存儲(chǔ)分層架構(gòu)實(shí)踐》的精彩演講。

黃勵(lì)博首先介紹了又拍云打造的以場(chǎng)景化服務(wù)為核心的跨云計(jì)算平臺(tái)業(yè)務(wù)，通過(guò)深度聚焦客戶(hù)的核心體驗(yàn)，又拍云以場(chǎng)景化服務(wù)為核心，構(gòu)建了包括計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)、安全在內(nèi)的跨云計(jì)算平臺(tái)。作為國(guó)內(nèi)知名的企業(yè)級(jí)云服務(wù)商，又拍云已為包括星巴克、快手、美團(tuán)點(diǎn)評(píng)、華數(shù)傳媒等知名企業(yè)在內(nèi)的超 50 萬(wàn)企業(yè)級(jí)客戶(hù)提供云服務(wù)，覆蓋音視頻、直播、電商、游戲、金融、廣電、在線(xiàn)教育、小程序等諸多行業(yè)，幫助企業(yè)用戶(hù)和開(kāi)發(fā)者輕松實(shí)現(xiàn)穩(wěn)定、可靠、安全的云服務(wù)。

黃勵(lì)博表示，又拍云作為國(guó)內(nèi)最早提供云存儲(chǔ)服務(wù)的廠商，行業(yè)經(jīng)驗(yàn)頗多，其提供的海量、安全、高可靠的面向非結(jié)構(gòu)化數(shù)據(jù)的云存儲(chǔ)服務(wù)，能夠滿(mǎn)足大數(shù)據(jù)、人工智能、物聯(lián)網(wǎng)背景下的數(shù)據(jù)傳輸、處理、存儲(chǔ)、分發(fā)與容災(zāi)需求，具有如下優(yōu)點(diǎn)：
穩(wěn)定可靠。數(shù)據(jù)多備份，跨數(shù)據(jù)中心存儲(chǔ)，熱門(mén)數(shù)據(jù)多個(gè)數(shù)據(jù)中心綬存，確保業(yè)務(wù)穩(wěn)定、持久可信；

簡(jiǎn)單易用。設(shè)計(jì)簡(jiǎn)單，保留 Linux、Windows 的使用習(xí)慣，Bucket 不限存儲(chǔ)容量，可自動(dòng)彈性擴(kuò)展；

數(shù)據(jù)安全。提供賬號(hào)級(jí)、Bucket 級(jí)、Object 級(jí) ACL，數(shù)據(jù)中心具備 DDoS、CC 防護(hù)等能力，確保數(shù)據(jù)訪(fǎng)問(wèn)安全；

靈活上傳。體現(xiàn)在上傳加速、下載加速、多種上傳方式，基于分布式加速網(wǎng)絡(luò)，上傳速度快，支持大流量并發(fā)上傳；

接入方便。支持?jǐn)?shù)據(jù)遷移、在線(xiàn)壓縮解壓縮和 FTP，讓云存儲(chǔ)接入和使用更簡(jiǎn)單。

如此優(yōu)異的性能表現(xiàn)，得益于又拍云存儲(chǔ)服務(wù)采用的分布式架構(gòu)，使其不僅應(yīng)用場(chǎng)景廣泛，還降低了運(yùn)營(yíng)成本并合理利用了容量。黃勵(lì)博解釋道，該存儲(chǔ)架構(gòu)隨著靜態(tài)文件的不斷增加，為了降低 Web 服務(wù)器負(fù)載，可將靜態(tài)文件全部放在云存儲(chǔ)，從此無(wú)需考慮存儲(chǔ)容量及架構(gòu)升級(jí)。此外，還可以負(fù)載海量文件存儲(chǔ)，適用于圖片、音視頻、應(yīng)用安裝包等，配合 CDN 加速服務(wù)為互聯(lián)網(wǎng)應(yīng)用提供最佳體驗(yàn)。在數(shù)據(jù)歸檔與備份功能方面，可以提供更具成本效益的集中備份方案。

一切的服務(wù)和升級(jí)都是為了滿(mǎn)足用戶(hù)的需求。又拍云的用戶(hù)類(lèi)型主要分為存儲(chǔ)用戶(hù)、S3兼容用戶(hù)、CDN用戶(hù)。其中，廣大普通存儲(chǔ)用戶(hù)直接通過(guò)云存儲(chǔ) AP SDK 等工具使用存儲(chǔ)服務(wù)，S3兼容客戶(hù)一般是海外客戶(hù)，CDN 用戶(hù)會(huì)把存儲(chǔ)源作為源站，作為文件緩存等。

在統(tǒng)一接入層，主要提供了分區(qū)，分片，路由等功能。分區(qū)主要是根據(jù)副本，性能，帶寬延遲等需求和文件搜索文件查找的一些特殊要求決定。分片主要是針對(duì)大文件，有提高并發(fā)數(shù)，減少延遲的作用。

路由當(dāng)然是根據(jù)以上這些需求，動(dòng)態(tài)的選擇一個(gè)存儲(chǔ)集群來(lái)存儲(chǔ)和訪(fǎng)問(wèn)。在存儲(chǔ)層通過(guò) Unified Storage Api 來(lái)訪(fǎng)問(wèn)，根據(jù)存儲(chǔ)數(shù)據(jù)的類(lèi)型不同，分為 Metadata Storage，Block Storage，Event Storage，Metadata Storage 主要存儲(chǔ)對(duì)象存儲(chǔ)系統(tǒng)的元數(shù)據(jù)，類(lèi)似 inode 信息，另外可以存儲(chǔ)少量 data，優(yōu)化減少首包延遲。元數(shù)據(jù)存儲(chǔ)層又細(xì)分為 Mysql、Hbase 和 TiKV，可參考下圖了解：

元數(shù)據(jù)存儲(chǔ)系統(tǒng)采用以上的開(kāi)源服務(wù)，又拍云在此之上開(kāi)發(fā)了一系列的代理服務(wù)。比如解決了 Hbase Rest Server 的對(duì)外訪(fǎng)問(wèn)的安全性問(wèn)題，同時(shí)可以統(tǒng)計(jì)相關(guān)請(qǐng)求，及時(shí)發(fā)現(xiàn)超時(shí)空洞等情況，及時(shí)觸發(fā)合并壓縮操作。

作為又拍云存儲(chǔ)服務(wù)的重要部分，又拍云數(shù)據(jù)片存儲(chǔ)系統(tǒng)根據(jù) Amazon Dynamo 論文實(shí)現(xiàn)，采用了 Quorum- Based 復(fù)制機(jī)制，實(shí)現(xiàn)寫(xiě) N 讀 1， 可以保證各個(gè)副本的一致性，節(jié)點(diǎn)間 Handoff 機(jī)制和副本間 Repair 機(jī)制保證了副本的數(shù)量和副本間的一致性，節(jié)點(diǎn)信息通過(guò) Gossip 傳播。

涉及到存儲(chǔ)層 Event 采集系統(tǒng)的部分，黃勵(lì)博介紹道，Event Storage 分為 Kafka、NSQ 和 Redis 三個(gè)板塊。其中關(guān)于基于 Kafka 的存儲(chǔ)異步任務(wù)又細(xì)分為多個(gè)部分，例如遷移、優(yōu)化、垃圾回收、修復(fù)、過(guò)期、索引以及統(tǒng)計(jì)等。

又拍云 Event 存儲(chǔ)基于內(nèi)容優(yōu)化，支持內(nèi)容尋址冷熱遷移，副本遷移等存儲(chǔ)業(yè)務(wù)上保證消息只處理一次，極大提高了處理速率。而基于 NSQ 的存儲(chǔ)處理服務(wù)中，圖片處理、文檔處理和音視頻處理是云拍云存儲(chǔ)服務(wù)的重要內(nèi)容，這方面又拍云的優(yōu)勢(shì)在于實(shí)現(xiàn)支持優(yōu)先級(jí)隊(duì)列的 NSQ，方便定制功能，事件處理完成即可，不用保存到磁盤(pán)。

最后，黃勵(lì)博再次強(qiáng)調(diào)了又拍云對(duì)用戶(hù)的重視與技術(shù)投入，新十年，又拍云明確要打造以場(chǎng)景化服務(wù)為核心的跨云計(jì)算平臺(tái)，在相繼推出直播云服務(wù)、完善云存儲(chǔ)+CDN 一體化服務(wù)和推出容器云平臺(tái)后，又拍云將在音視頻、金融等更多的領(lǐng)域展開(kāi)合作，繼續(xù)為幫助企業(yè)用戶(hù)和開(kāi)發(fā)者輕松實(shí)現(xiàn)穩(wěn)定、可靠、安全的云服務(wù)而不懈努力。