上海聚搜信息技術(shù)有限公司是阿里云的代理商網(wǎng)址:http://www.4526.cn/可以直接在網(wǎng)站上聯(lián)系阿里云代理商客服進(jìn)行咨詢(xún)服務(wù)器架構和配置以及優(yōu)惠價(jià)格?。ň鬯?a href="http://www.ysatjc.com/">營(yíng)銷(xiāo)介紹鏈接:http://www.ysatjc.com/meiyou/)是一家致力于搜索引聚搜營(yíng)銷(xiāo)及全網(wǎng)營(yíng)銷(xiāo),致力于為客戶(hù)提供搜索營(yíng)銷(xiāo)領(lǐng)域的服務(wù),幫助廣告客戶(hù)在搜索引聚搜獲取的投資回報,包括搜索引聚搜競價(jià)服務(wù)(SEM),搜索引聚搜優(yōu)化服務(wù)(seo)和搜索營(yíng)銷(xiāo)代運營(yíng)服務(wù),能夠有效為廣告主帶來(lái)高效的投放回報,我們的理念一直是:讓搜索營(yíng)銷(xiāo)營(yíng)銷(xiāo)具有價(jià)值。
存儲和數據遷移的挑戰
在傳統企業(yè)服務(wù)中,大多數企業(yè)都是自建idc,因此經(jīng)常會(huì )遇到各種各樣的問(wèn)題,第一是成本高,機器成本、網(wǎng)絡(luò )成本、人工成本,軟件授權費用,公網(wǎng)內網(wǎng)費用,IDC租用費用等等。第二是運維很難,經(jīng)常隨著(zhù)數據的積累,硬盤(pán)故障,服務(wù)器故障,網(wǎng)絡(luò )故障,軟件故障,IDC故障,用戶(hù)投訴,整個(gè)運維難度成指數增加,體驗非常差。第三是性能難保障,數據可靠性,服務(wù)可用性,功能先進(jìn)性,安全性。隨著(zhù)業(yè)務(wù)的發(fā)展,以前的存儲系統很難滿(mǎn)足業(yè)務(wù)的發(fā)展、功能和性能的發(fā)展。因此向云遷移是數據存儲的未來(lái)趨勢。
阿里云存儲有很全的產(chǎn)品家族,包含塊存儲、文件存儲、對象存儲、歸檔存儲、表格存儲等等。每一項都可以分很多子項。因此運維也不像以前那么難,可以做到代碼改動(dòng)上云、安全免運維(不用關(guān)注細節)、三步開(kāi)通(開(kāi)通-使用-付費)、一鍵備份等等,非常簡(jiǎn)潔方便。阿里云存儲在全球有19個(gè)節點(diǎn),可以做到全球寫(xiě)、全球讀,目前在國內是最強的。
阿里云存儲海量數據遷移解決方案
對于數據遷移來(lái)說(shuō),一般分為以下五個(gè)步驟:
1、評估現有的業(yè)務(wù)情況。做遷移之前,一定要把業(yè)務(wù)的情況了解清楚,比如:現有存儲的總體IO、總吞吐、網(wǎng)絡(luò )總帶寬、已用帶寬。
2、評估可用資源。存儲集群可用吞吐、IO、可用穩定網(wǎng)絡(luò )帶寬、預留安全水位。
3、遷移前準備。根據評估狀況制定遷移方案,計算需要的部署閃電立方Agent的集群數量和NASImport集群數量。
4、開(kāi)始遷移。部署遷移集群,監測遷移狀態(tài),失敗文件重試。
5、遷移結束。檢查遷移文件數、校驗遷移文件正確性。
在向云遷移海量數據的過(guò)程中,因為非結構化的存儲比結構化的存儲有更多的數據格式類(lèi)型。對于非結構化的存儲,沒(méi)有辦法知道有多少數據類(lèi)型和文件系統,也有一些本地的大數據相關(guān)的對象存儲,這樣的對象存儲,接口不一樣,實(shí)現功能也不一樣,因此對于非結構化的存儲遷移需要更多的組合方案。阿里云提供了離線(xiàn)遷移的方案,叫閃電立方。同時(shí)也提供了海量數據在線(xiàn)遷移基于OSS/NASImport的在線(xiàn)遷移工具,針對不同的互聯(lián)網(wǎng)產(chǎn)品,也提供了各種遷移服務(wù),比如混合云存儲陣列、鏡像回源、302跳轉、偽源站等等。下面分別介紹這六種解決方案。
在線(xiàn)遷移神器OSS/NASImport
Import工具是一款全在線(xiàn)的海量數據遷移工具,通過(guò)部署到服務(wù)器或者ecs機器,可以快速、安全穩定的將數據遷移到阿里云存儲。它有如下特點(diǎn):
1、支持多種源站,多種數據接口,可定制開(kāi)發(fā).
2、全在線(xiàn)服務(wù),無(wú)縫遷移。
3、支持存量數據同步和增量數據自動(dòng)同步。
4、支持斷點(diǎn)續傳,失敗任務(wù)重傳。
5、支持上傳/下載流量控制。
6、支持多任務(wù),并行數據下載/上傳。
7、支持上傳結果校驗。
8、可視化監視界面。
離線(xiàn)遷移神器閃電立方
除了在線(xiàn)遷移之外,閃電立方是阿里云2017年發(fā)布的一款離線(xiàn)遷移神器,閃電立方實(shí)際上是一臺服務(wù)器,它有如下特點(diǎn):
1、軍工級物流密碼保護箱。
2、雙控制器,支持雙電源。
3、企業(yè)級SAS硬盤(pán),Raid6數據保護。
4、AES256 對稱(chēng)加密,MAC認證。
5、客戶(hù)保管密碼 SHA256(可選)。
6、支持壓縮去重。
7、確認遷移完成后,數據合規擦除。
8、單套支持每次遷移480TB。
閃電立方就像一個(gè)超大的U盤(pán),可以直接把閃電立方插到機房,然后把數據遷移到閃電立方,再通過(guò)專(zhuān)業(yè)傳輸物流上傳到阿里云機房即可遷移成功。
混合云存儲陣列
OSS/NASImport和閃電立方這兩種方案基本上在數據遷移之后,企業(yè)會(huì )放棄自己的機房,然而對于想混合使用的原有機房和云上資源的情況下,阿里云也有解決方案,就是使用混合云陣列,使用場(chǎng)景有企業(yè)數據云端拓展、企業(yè)數據云端同步、備份數據云端異地災備等。它的核心功能是提供豐富的設備端協(xié)議支持,原有應用無(wú)需修改,提供端到端的數據加密機制,數據自動(dòng)分層,高性能的數據上云能力。有緩存和同步兩種模式,數據支持端到端的壓縮、去重、加密,還支持多版本快照、數據自動(dòng)分層。
OSS鏡像回源
另外有一些互聯(lián)網(wǎng)業(yè)務(wù),完全不能停機遷移的,阿里云也提供兩種遷移方案,第一個(gè)是OSS鏡像回源,功能是把所有的訪(fǎng)問(wèn)先切到OSS上面,然后配置好鏡像回源的地址,用戶(hù)訪(fǎng)問(wèn)OSS的時(shí)候,OSS會(huì )主動(dòng)回源到主站。
302跳轉
另外一種方案,不需要把所有數據遷移到OSS數據,比如熱點(diǎn)數據,我們提供302跳轉功能。當用戶(hù)通過(guò)cdn訪(fǎng)問(wèn)OSS的時(shí)候,即使OSS沒(méi)有數據,只要打開(kāi)302跳轉功能并且配置好回源地址,OSS會(huì )主動(dòng)的把回源地址返回給CDN,然后CDN會(huì )拿到地址再回源到源站拿到數據返回給用戶(hù)。這兩種是完全在線(xiàn)遷移,對互聯(lián)網(wǎng)業(yè)務(wù)和增量數據遷移是非常好用的。
偽源站
如果企業(yè)有多個(gè)源站,可以使用偽源站在線(xiàn)遷移,把偽源站和真正的源站進(jìn)行隔離,由偽源站去拿數據。偽源站相當于替代源站,去把所有的業(yè)務(wù)處理完以后,再把數據上傳到OSS,這在互聯(lián)網(wǎng)業(yè)務(wù)分發(fā)應用的非常廣泛。
以上介紹的6個(gè)方案適用于不同的應用場(chǎng)景。對于非結構化的數據來(lái)說(shuō),數據類(lèi)型太多、數據量大小也不一樣。例如像閃電立方,最適合做離線(xiàn)遷移,即使數據量上百TB,但前置條件是本地IDC要有足夠的內網(wǎng)帶寬和機架提供給閃電立方。例如像鏡像回源,用戶(hù)訪(fǎng)問(wèn)OSS的時(shí)候,如果文件特別大,再去源站拿數據的時(shí)候,訪(fǎng)問(wèn)速度就會(huì )非常慢,所以鏡像回源適合小規模的文件遷移,例如圖片、短視頻等等。