2021年是IPTV安播年，運維保障是電視媒體的重中之重，為了了解自動化運維在互動電視領(lǐng)域的應(yīng)用，眾視Tech采訪到了百度智能云解決方案架構(gòu)師王曉曦先生，與大家分享百度智能云在大視頻領(lǐng)域技術(shù)與業(yè)務(wù)上的思考、研究與實踐。

百度智能云解決方案架構(gòu)師?王曉曦

從業(yè)務(wù)角度看，隨著5G技術(shù)的不斷成熟，大視頻領(lǐng)域的業(yè)務(wù)不斷顛覆著的傳統(tǒng)電視的模式。從2016年IPTV業(yè)務(wù)發(fā)展進入的快車道，用戶增長快速、各類互動和業(yè)務(wù)模式、IPTV業(yè)務(wù)經(jīng)歷了從單一視聽業(yè)務(wù)到融媒體業(yè)務(wù)的變化，從運營思維、用戶場景、大視頻領(lǐng)域的市場等各方面的創(chuàng)新。

業(yè)務(wù)上的創(chuàng)新及高速發(fā)展，運維保障工作的變革主要體現(xiàn)在哪些方面？

王曉曦介紹，"業(yè)務(wù)的全面融合，平臺的業(yè)務(wù)保障工作迎來了新的挑戰(zhàn)。從技術(shù)架構(gòu)上大視頻領(lǐng)域的應(yīng)用系統(tǒng)從單體服務(wù)到微服務(wù)，業(yè)務(wù)數(shù)據(jù)從G到了T，逐步呈現(xiàn)出"微服務(wù)+大數(shù)據(jù)"的模式，這是推動運維向智能化轉(zhuǎn)型的起點。

大視頻領(lǐng)域的業(yè)務(wù)需求有起獨特性，做好業(yè)務(wù)保障需要的不僅僅是技術(shù)平臺，而是一個保障體系，需要從意識到團隊再到技術(shù)路線全面改革。百度結(jié)合大視頻領(lǐng)域的業(yè)務(wù)情況，從"技術(shù)架構(gòu)、團隊協(xié)作、數(shù)據(jù)可視化"三方面構(gòu)建保障體系，王曉曦說這三點是大視頻業(yè)務(wù)保障的"地基"，支撐業(yè)務(wù)的發(fā)展。

01?架構(gòu)變"現(xiàn)"，微服務(wù)架構(gòu)，提升服務(wù)價值，降低運維工作量

微服務(wù)是一種用于構(gòu)建應(yīng)用的架構(gòu)方案，是技術(shù)的變革，為什么說是經(jīng)驗變現(xiàn)呢？

微服務(wù)不僅是一個技術(shù)框架，它本身還是一個平臺框架，需要能拆分成微服務(wù)，也需要能合體為應(yīng)用系統(tǒng)，這是經(jīng)驗積累的變現(xiàn)，而不簡單是技術(shù)變革。

服務(wù)的拆分依據(jù)：是對業(yè)務(wù)體系的解構(gòu)

百度智能云在大屏視頻領(lǐng)域多年，與行業(yè)同行，2018年開始，百度對成熟的系統(tǒng)平臺進行微服務(wù)架構(gòu)的改造，"微服務(wù)架構(gòu)有別于更為傳統(tǒng)的單體式方案，可將應(yīng)用拆分成多個核心功能。每個功能都被稱為一項服務(wù)，可以單獨構(gòu)建和部署，這意味著各項服務(wù)在工作時不會相互影響。服務(wù)不是傳統(tǒng)模塊化簡單的變體，需要根據(jù)實際業(yè)務(wù)情況分層分顆粒度。

微服務(wù)業(yè)務(wù)解構(gòu)（基礎(chǔ)數(shù)據(jù)、公共能力、業(yè)務(wù)應(yīng)用 拼圖單體）

技術(shù)平臺的構(gòu)建：是以業(yè)務(wù)為導(dǎo)向的整合

百度智能云重構(gòu)整個業(yè)務(wù)運營平臺，是為適應(yīng)業(yè)務(wù)的快速迭代與整合，包括它的網(wǎng)關(guān)和一些對后端的訪問、應(yīng)對大壓力的熔斷限流等等技術(shù)，應(yīng)對用戶規(guī)模帶來的前瞻性問題，這是我們當初去重構(gòu)整個平臺去做微服務(wù)化的目的。

大視頻領(lǐng)域從業(yè)務(wù)線，基礎(chǔ)層可以分為播控體系、用戶體系、數(shù)據(jù)體系、安全體系，增值業(yè)務(wù)層按照不同的業(yè)務(wù)應(yīng)用獨立，如：大小屏互動、在線教育、醫(yī)院問診等融合業(yè)務(wù)。

業(yè)務(wù)系統(tǒng)的聚合（業(yè)務(wù)閉環(huán)的小圈組合的大圈）

02?技術(shù)變"現(xiàn)"，引入Devops理念，開發(fā)運維持續(xù)交付，提升迭代效率

微服務(wù)是Devops的基礎(chǔ)，傳統(tǒng)的單體應(yīng)用由于每一個環(huán)節(jié)都由不同的團隊去完成的，這一形式造成了信息的孤島，即傳遞到某一環(huán)節(jié)，再往下傳時那個信息可能就會出現(xiàn)丟失的情況。Netflix提出"誰構(gòu)建，誰運維"這一理念旨在鼓勵系統(tǒng)開發(fā)團隊同時負責(zé)系統(tǒng)的運維與支持工作。

因此Netflix的這一理念打破了鏈條式開發(fā)的狀態(tài)，避免了其帶來的各類問題，使運維、研發(fā)成為了一體，從而真正將 DevOps 引入實踐。百度經(jīng)過近2年時間，構(gòu)建一套適應(yīng)這個閉環(huán)的工具鏈平臺，現(xiàn)在可以說完全融入Devops這樣的研發(fā)模式。

DevOps工具鏈

質(zhì)量是設(shè)計出來，同樣業(yè)務(wù)保障體系是需要貫穿到軟件的開發(fā)每個環(huán)節(jié)的。百度智能云將完整可運行的應(yīng)用做為交付標準，從研發(fā)到實施，使QA貫穿了全流程，王曉曦介紹道："對于運維團隊來說，軟件的開發(fā)具有周期性，比如從需求到設(shè)計，到開發(fā)、測試，最終到運維是一條線，呈現(xiàn)鏈條式的狀態(tài)，運維成為了軟件設(shè)計的重要組成部分，并且對于軟件設(shè)計來說是隱形但必選的需求。"

那么，運維應(yīng)該如何做好轉(zhuǎn)型？王曉曦的答案是技術(shù)產(chǎn)品和技術(shù)運營，運維人員轉(zhuǎn)型到自動化運維的研究，技能重組，復(fù)合型技能實現(xiàn)自動化，共同降低運維的門檻。

03?數(shù)據(jù)變"現(xiàn)"，數(shù)據(jù)驅(qū)動，構(gòu)建運維可視化平臺，降低運維門檻

技術(shù)產(chǎn)品和技術(shù)運營是大視頻領(lǐng)域數(shù)字化運維轉(zhuǎn)型過程中的關(guān)鍵點，大數(shù)據(jù)已經(jīng)全面應(yīng)用在大視頻領(lǐng)域業(yè)務(wù)上，結(jié)合大數(shù)據(jù)的基礎(chǔ)業(yè)務(wù)數(shù)據(jù)及應(yīng)用本身的日志數(shù)據(jù)，百度基于已有的運維數(shù)據(jù)（日志、監(jiān)控信息、應(yīng)用信息等），以業(yè)務(wù)為導(dǎo)向，探索智能運維的實踐之路，實現(xiàn)數(shù)據(jù)變現(xiàn)。

運維可視化主要從以下三方面進行呈現(xiàn)：一是監(jiān)控數(shù)據(jù)；二是異常告警，根據(jù)對數(shù)據(jù)的告警規(guī)則，能夠及時的發(fā)現(xiàn)服務(wù)器或應(yīng)用的問題，并告知運營人員后解決問題；三是自動降級。

可視化的維度

王曉曦說，面對單體應(yīng)用的運維時，這么多年"滅火隊式的運維，對我們來說是常態(tài)，但是當這種模式滿足業(yè)務(wù)需求時，我們需要從內(nèi)部打破這種常態(tài)。構(gòu)建數(shù)據(jù)驅(qū)動的可視化運維平臺，是將運維系統(tǒng)化的落地。"

百度智能云提出以業(yè)務(wù)為中心的可視化智能運維，了解運維可視化，其核心是將所運維的服務(wù)、資源、設(shè)備的狀態(tài)和正在發(fā)生的事件通過可視化的形式呈現(xiàn)出來，并指導(dǎo)運維人員或者產(chǎn)品研發(fā)人員做出正確的運維決策。

這一點涉及到了及時性和準確率的平衡問題，算法和經(jīng)驗/規(guī)則的有效性問題，實時數(shù)據(jù)和歷史數(shù)據(jù)的可信性問題以及當掌握全面的信息時，如何聚焦到有用的信息的問題。

如何平衡及時性和準確率？

由于準確性關(guān)注的是數(shù)據(jù)記錄中存在的錯誤或異常等問題，而平衡性是數(shù)據(jù)的同步和處理過程的效率相關(guān)，作為聯(lián)動關(guān)系，平衡好兩者關(guān)系尤為重要。

而對于算法和經(jīng)驗/規(guī)則，王曉曦表示："數(shù)據(jù)收集時，我們針對解決問題的點，從數(shù)據(jù)本身去做一定的分類。在正常錯誤中，其最簡單的分法就是不用管數(shù)據(jù)錯誤。至于報的是什么錯，回頭再分析這個報錯是否應(yīng)該獨立的看，并關(guān)注報錯的點追溯起因。因此，數(shù)據(jù)在歸類的過程中，除了根據(jù)匯總的重點做規(guī)則，還要從算法和經(jīng)驗做規(guī)則。

如何將實時數(shù)據(jù)和歷史數(shù)據(jù)結(jié)合？

王曉曦講解道："收集的數(shù)據(jù)中問題分兩種，其中一種問題是及時性問題，即當前一旦觸發(fā)一個點就會導(dǎo)致的問題。另一個是在一個月正常運營之后突然報的問題，但這一個問題不是今天才產(chǎn)生的，而是經(jīng)過長時間問題的積累后產(chǎn)生的問題。在這一情況下，我們需要進行分場景或分問題的歸因。"

百度智能云在可視化智能運維上的進行深入研究后，得到了更加完整的"產(chǎn)品運營"為核心的運維體系，某種程度上，可視化程度越高，運維就越簡單，運維效率也就越高。其價值在于是技術(shù)產(chǎn)品和技術(shù)運營成為新融合、新跳板，最終實現(xiàn)大視頻領(lǐng)域數(shù)字化轉(zhuǎn)型。

04?AIOps價值流，人工智能賦能業(yè)務(wù)保障體系

對于已經(jīng)擁有超3億用戶規(guī)模的IPTV而言，用戶流量、流量變現(xiàn)至關(guān)重要。IPTV一直在探索從流量到留量的轉(zhuǎn)型路徑，在行業(yè)各領(lǐng)域前進。而百度智能云一直以來鉆研IPTV領(lǐng)先技術(shù)，迎來微服務(wù)時代后，通過構(gòu)建"產(chǎn)品運營"為核心的運維體系，奠定了業(yè)務(wù)發(fā)展的基石。

王曉曦介紹："傳統(tǒng)的單體應(yīng)用業(yè)務(wù)耦合度過高，很難實現(xiàn)從研發(fā)階段到實施部署，完成一個閉環(huán)，但是中間環(huán)節(jié)是有一系列的工具來完成，而不是讓人完成。因此需要找出更加完善的運維思路才能解決問題。現(xiàn)在在運維方面，正在探索從人工運維到自動化運維的轉(zhuǎn)變。

大視頻行業(yè)的數(shù)字化轉(zhuǎn)型，使產(chǎn)品運營成為新跳板。