故障處理及故障記錄

接收?qǐng)?bào)障：

需要故障發(fā)生時(shí)的雙向MTR截圖和ping數(shù)據(jù)，此動(dòng)作可與直接報(bào)給供應(yīng)商同步進(jìn)行，并及時(shí)記錄故障發(fā)生時(shí)的時(shí)間，然后仔細(xì)查看mtr的路徑和丟包情況，判斷分析是哪個(gè)地市出現(xiàn)的問(wèn)題，并督促IDC及時(shí)聯(lián)系運(yùn)營(yíng)商介入處理。如遇到重大，波及面廣的故障及時(shí)報(bào)障給孫嘉。

報(bào)障處理：

遇到故障及時(shí)登陸交換機(jī)，檢測(cè)平臺(tái)內(nèi)部網(wǎng)絡(luò)情況，查看相應(yīng)服務(wù)器對(duì)應(yīng)的設(shè)備接口情況，諸如：光模塊收發(fā)光情況，端口error情況，光纖鏈路問(wèn)題，查看syslog，查看交換機(jī)性能情況（CPU、內(nèi)存、溫度、電源、健康檢查）。相應(yīng)traceroute判斷問(wèn)題節(jié)點(diǎn)，作為憑證再次報(bào)給IDC，加快定位故障和處理速度。

故障完成：

大多數(shù)故障需要當(dāng)即處理完成，記錄處理恢復(fù)時(shí)間，及詳細(xì)的故障處理過(guò)程（儲(chǔ)備故障處理經(jīng)驗(yàn)），如果為IDC問(wèn)題，需要IDC的蓋章函件作為故障報(bào)告的憑證發(fā)郵件到netgroup，如果為ISP問(wèn)題，則需要ISP蓋章加IDC蓋章的函件發(fā)至郵箱。函件中的時(shí)間和我們記錄的時(shí)間需要溝通協(xié)調(diào)一致。

記錄：網(wǎng)路部匯總表.xlsx 匯總記錄故障處理情況

---

機(jī)房設(shè)備統(tǒng)計(jì)

凡是在IDC機(jī)房的所有設(shè)備及硬件（交換機(jī)、服務(wù)器、光纖、模塊），均為我們固定資產(chǎn)，要求IDC妥善保管，如果有壞件要打上相應(yīng)問(wèn)題的標(biāo)簽（模塊無(wú)發(fā)光，丟包，error包，光弱等問(wèn)題的描述），要求機(jī)房不得擅自丟失和遺棄任何硬件。

記錄：網(wǎng)路部匯總表.xlsx 匯總記錄硬件信息

---

機(jī)房設(shè)備上架下架

新增選點(diǎn)機(jī)房，和采購(gòu)部確認(rèn)發(fā)貨數(shù)量，確認(rèn)硬件包括：交換機(jī)、服務(wù)器數(shù)量及類型、光纖、模塊。并且同時(shí)督促盡快辦理相應(yīng)實(shí)施工單，包括但不限于施工工單，設(shè)備上架工單，設(shè)備加電工單，接收設(shè)備收貨人等信息，盡可能避免設(shè)備延期上架使用。上架后開機(jī)進(jìn)行一系列測(cè)試方可交給業(yè)務(wù)部門。

機(jī)房設(shè)備下架需要對(duì)比發(fā)貨數(shù)量，核對(duì)后通知IDC人員進(jìn)行下架操作，下架后對(duì)相應(yīng)設(shè)備進(jìn)行包裝避免運(yùn)輸中對(duì)設(shè)備有損壞的危險(xiǎn)，發(fā)貨地址和采購(gòu)部進(jìn)行確認(rèn)，并且得到快遞單號(hào)后及時(shí)反饋給采購(gòu)部。

機(jī)房對(duì)設(shè)備操作后需要填寫回執(zhí)單，我們核對(duì)無(wú)誤后留存。

記錄：網(wǎng)路部匯總表.xlsx 匯總記錄ip資源信息

設(shè)備驗(yàn)收檢查

按照業(yè)務(wù)的要求，檢查設(shè)備是否可以正常使用，硬件是否滿足額度要求，需對(duì)服務(wù)器進(jìn)行相應(yīng)排查:

服務(wù)器硬件檢驗(yàn)的同時(shí)，檢查所有設(shè)備的配置情況，包括ip、掩碼、端口描述、設(shè)備命名等，測(cè)試網(wǎng)絡(luò)環(huán)境，諸如ping、traceroute到公網(wǎng)ip、三線資源是否有問(wèn)題。無(wú)問(wèn)題后方可使用。

---

網(wǎng)絡(luò)巡檢

利用監(jiān)控系統(tǒng)，查看每日流量使用情況，24小時(shí)為一周期（9：00），結(jié)合syslog查看每日的故障報(bào)告，和端口狀態(tài)等信息。

利用zabbix微信故障提醒功能，可實(shí)時(shí)監(jiān)控平臺(tái)主機(jī)情況，問(wèn)題發(fā)現(xiàn)后及時(shí)處理解決。

周期性觀察流量增長(zhǎng)（下降）情況，預(yù)先獲得趨勢(shì)信息，可在必要時(shí)采取行動(dòng)。

流量統(tǒng)計(jì)可以更直觀也會(huì)更可觀的說(shuō)明問(wèn)題，了解平臺(tái)每日out峰值可得知高峰時(shí)段用戶使用情況，也可根據(jù)95計(jì)費(fèi)原則對(duì)平臺(tái)流量進(jìn)行重規(guī)劃，分?jǐn)偭髁俊?/p>

機(jī)房信息	端口數(shù)量	保底帶寬M	In最大9.13	In平均值9.13	Out最大9.13	Out平均值9.13	In環(huán)比增長(zhǎng)	Out環(huán)比增長(zhǎng)	使用率9.13
黑龍江哈爾濱聯(lián)通	10G	1000	14.4	5.77	8.6	0.35	1.41%	-0.58%	0.860%
遼寧盤錦聯(lián)通	10G	1000	34	9.16	26.6	1.15	136.11%	315.63%	2.660%
廣東中山聯(lián)通	10G	1000	694	7.11	42.2	0.9	5238.46%	435.53%	4.220%
河南周口聯(lián)通	10G	1000	208	82	236	101	-8.33%	-4.76%	23.600%
河南商丘聯(lián)通	10G	1000	38.4	6.7	31.6	1.35	74.55%	97.50%	3.160%
湖南長(zhǎng)沙聯(lián)通	10G	1000	30.5	4.46	34.4	1.6	30.90%	93.26%	3.440%
福建福州聯(lián)通	10G	1000	18.31	3.29	12.11	0.43	6.83%	41.80%	1.211%
重慶聯(lián)通	10G	3000
陜西寶雞聯(lián)通	10G	3000
河北廊坊聯(lián)通	10G	1000	35.79	8	31	2.73	-1.24%	9.08%	3.100%
天津聯(lián)通	10G	1000	34.65	12.6	23.43	1.81	-94.58%	-22.16%	2.343%
山西朔州聯(lián)通	10G*2	2000	15.49	3	15.7	0.42	23.92%	65.26%	0.785%
山東泰安聯(lián)通	10G	1000	202.5	83.44	771	100	-14.34%	-29.91%	77.100%
山東青島聯(lián)通	10G	1000	26.7	6.48	22.52	1.1	-4.64%	1.08%	2.252%
吉林聯(lián)通	10G	1000	3.8	1.64	0.188	0.1	-70.08%	-98.47%	0.019%
浙江臺(tái)州聯(lián)通	10G	1000	37	4.96	33.8	2.7	2.95%	-0.59%	3.380%
湖南岳陽(yáng)電信	10G	1000
浙江麗水電信	10G	1000	27.43	14.64	22.8	1.2	-52.27%	-51.59%	2.280%
浙江湖州電信	10G	3000	86.04	43.33	98.9	55.18			3.297%
福建福州電信	10G	1000	95	29.5	79.3	9			7.930%
廣東佛山電信	10G	3000	70	35.15	83.4	47.9	-41.67%	-47.22%	2.780%
四川樂(lè)山電信	10G	1000	35	30.4	84.6	42.7	-47.62%	-89.61%	8.460%
陜西寶雞電信	10G	1000	19	7.11	11	0.26	-88.62%	2240.43%	1.100%
江蘇鹽城電信	10G	3000	973	345	972	345	-0.10%	-3.76%	32.400%
云南昆明電信	10G	1000	14	7	156	1.2	27.27%	3527.91%	15.600%
陜西咸陽(yáng)電信	10G	1000	72	8	13	0.86	-87.82%	-53.57%	1.300%
廣東中山電信	10G	1000	45	32	16	2	800.00%	220.00%	1.600%
湖北鄂州電信	10G	2000	2070	612	3140	967	30.19%	18.49%	157.000%
山東濟(jì)南三線	10G	1000	1060	243	1150	284	3.92%	6.48%	115.000%
山東濟(jì)南電信	10G	1000	10	7	4	0.5	-23.08%	-60.00%	0.400%
河南洛陽(yáng)電信	10G	1000	88	16	79	3.6	-23.48%	-34.17%	7.900%
重慶電信	10G	1000	21	15	7.5	0.1	23.53%	-25.00%	0.750%
太原移動(dòng)	10G	2000	7	0.3	250	2	16.67%	1150.00%	12.500%
武漢長(zhǎng)寬	10G		5	0.08	4	0.08	-61.54%	-69.23%
上海長(zhǎng)寬	10G		12	0.13	26	0.15	-33.33%	36.84%
南昌移動(dòng)	10G	2000	26	2.5	31	3	30.00%	93.75%	1.550%
揚(yáng)州電信IDC	10G	1000	110	29	97	16.8	-15.38%	-33.56%	9.700%
天津電信	10G	1000	27	8.5	165	1.85	-96.08%	292.86%	16.500%
石景山BGP機(jī)房	20M	20	1	0.05	0.25	0.03	1566.67%	-39.02%	1.250%
廣東佛山三線		1000	1070	487	1210	610	7.75%	9.01%	121.000%
北京長(zhǎng)寬	10G		0.8	0.1	18	0.3	566.67%	0.00%
武漢聯(lián)通	10G	1000	347	114	446	136	-11.03%	4.69%	44.600%
淮南移動(dòng)	10G
機(jī)房總帶寬使用			7684.81	2325.4	9453.898	2746.35	-7.82%	1.68%

統(tǒng)計(jì)每日流量使用率，可以得知平臺(tái)流量上升（下降）情況，根據(jù)此數(shù)據(jù)適當(dāng)調(diào)整IDC保底帶寬值，主要作為預(yù)警功能使用。

機(jī)房名稱	使用率9.8	使用率9.9	使用率9.10	使用率9.11	使用率9.12	使用率9.13
黑龍江哈爾濱聯(lián)通	0.66%	2.76%	0.40%	1.30%	0.87%	0.86%
遼寧盤錦聯(lián)通	1.67%	1.56%	1.96%	14.30%	0.64%	2.66%
廣東中山聯(lián)通	1.68%	1.60%	2.16%	0.79%	0.79%	4.22%
河南周口聯(lián)通	11.50%	67.50%	0.13%	29.00%	24.78%	23.60%
河南商丘聯(lián)通	2.20%	5.50%	2.10%	3.60%	1.60%	3.16%
湖南長(zhǎng)沙聯(lián)通	45.50%	37.40%	24.09%	1.60%	1.78%	3.44%
福建福州聯(lián)通	1.25%	1.35%	1.10%	0.68%	0.85%	1.21%
重慶聯(lián)通	0.00%	0.00%	0.00%
陜西寶雞聯(lián)通	0.00%	0.00%	0.00%
河北廊坊聯(lián)通	2.50%	1.91%	2.64%	2.60%	2.84%	3.10%
天津聯(lián)通	15.50%	12.85%	3.97%	3.30%	3.01%	2.34%
山西朔州聯(lián)通	0.28%	0.69%	0.90%	1.20%	0.95%	0.79%
山東泰安聯(lián)通	12.10%	10.65%	95.82%	10.60%	110.00%	77.10%
山東青島聯(lián)通	3.80%	3.00%	5.67%	2.90%	2.23%	2.25%
吉林聯(lián)通	0.78%	0.43%	1.77%	0.58%	1.23%	0.02%
浙江臺(tái)州聯(lián)通	7.60%	3.04%	2.87%	3.60%	3.40%	3.38%
湖南岳陽(yáng)電信	0.00%	0.00%	0.00%	0.00%
浙江麗水電信	12.16%	2.30%	4.16%	4.80%	4.71%	2.28%
浙江湖州電信	0.00%	0.00%	0.00%	0.00%	0.00%	3.30%
福建福州電信	0.00%	0.00%	0.00%	0.00%	0.00%	7.93%
廣東佛山電信	4.03%	3.50%	11.86%	10.67%	5.27%	2.78%
四川樂(lè)山電信	7.87%	1.50%	6.55%	2.48%	81.44%	8.46%
陜西寶雞電信	0.00%	0.00%	0.00%	5.40%	0.05%	1.10%
江蘇鹽城電信	82.60%	75.30%	90.20%	94.80%	33.67%	32.40%
云南昆明電信	1.20%	1.05%	1.21%	0.70%	0.43%	15.60%
陜西咸陽(yáng)電信	0.00%	0.00%	0.00%	0.00%	2.80%	1.30%
廣東中山電信	76.50%	65.20%	2.16%	77.40%	0.50%	1.60%
湖北鄂州電信	0.00%	0.00%	0.00%	0.00%	265.00%	157.00%
山東濟(jì)南三線	56.00%	110.00%	99.63%	0.00%	108.00%	115.00%
山東濟(jì)南電信	1.20%	1.30%	1.03%	1.50%	1.00%	0.40%
河南洛陽(yáng)電信	36.20%	11.40%	6.62%	11.20%	12.00%	7.90%
重慶電信	1.60%	1.00%	1.02%	0.40%	1.00%	0.75%
太原移動(dòng)	0.00%	0.00%	0.00%	8.65%	1.00%	12.50%
武漢長(zhǎng)寬	0.00%
上海長(zhǎng)寬	0.00%
南昌移動(dòng)	0.00%	0.00%	0.00%	0.90%	0.80%	1.55%
揚(yáng)州電信IDC	10.00%	8.50%	12.78%	80.80%	14.60%	9.70%
天津電信	1.94%	2.70%	2.78%	2.20%	4.20%	16.50%
石景山BGP機(jī)房	2.75%	2.30%	0.22%	2.00%	2.05%	1.25%
廣東佛山三線	254.00%	151.00%	100.10%	114.00%	111.00%	121.00%
北京長(zhǎng)寬	0.00%	0.00%	0.00%	0.00%
武漢聯(lián)通	0.00%	0.03%	38.37%	47.10%	42.60%	44.60%
淮南移動(dòng)	0.00%

轉(zhuǎn)載于:https://blog.51cto.com/yangyy/1878695

總結(jié)

以上是生活随笔為你收集整理的CDN网络职责的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。