锐客直播_锐客直播app官方正版下载_锐客直播直播视频在线观看免费版下载

400-650-7353

精品課程

什么是Apache Kafka? Apache Kafka是什么?

發(fā)布: 大數(shù)據(jù)培訓(xùn) 發(fā)布時(shí)間:2021-08-02 19:03:50

推薦答案
品牌型號(hào):聯(lián)想 YOGA 14c/系統(tǒng)版本:windows7

Apache Kafka是一個(gè)分布式數(shù)據(jù)流處理平臺(tái),可以實(shí)時(shí)發(fā)布、訂閱、存儲(chǔ)和處理數(shù)據(jù)流。它設(shè)計(jì)為處理多種來(lái)源的數(shù)據(jù)流,并將它們交付到多個(gè)消費(fèi)者。簡(jiǎn)而言之,它可以移動(dòng)大量數(shù)據(jù),不僅是從A點(diǎn)移到B點(diǎn),而是能從A到Z的多個(gè)點(diǎn)移到任何您想要的位置,并且可以同時(shí)進(jìn)行。

Apache Kafka 可以取代傳統(tǒng)的企業(yè)級(jí)消息傳遞系統(tǒng)。它最初是Linkedin為處理每天1.4萬(wàn)億條消息而開(kāi)發(fā)的一個(gè)內(nèi)部系統(tǒng),現(xiàn)已成為應(yīng)用于各式各樣企業(yè)需求的開(kāi)源數(shù)據(jù)流處理解決方案。

Kafka主要有兩類用途:構(gòu)建能讓系統(tǒng)或應(yīng)用之間可靠地獲取數(shù)據(jù)的實(shí)時(shí)流數(shù)據(jù)管道;構(gòu)建轉(zhuǎn)換或響應(yīng)流數(shù)據(jù)的實(shí)時(shí)流應(yīng)用

Kafka有四個(gè)核心API,分別為:

Producer API:該接口允許應(yīng)用發(fā)布一個(gè)流數(shù)據(jù)到一個(gè)或多個(gè)topics。

Consumer API:該接口允許應(yīng)用訂閱一個(gè)或多個(gè)topics然后處理這些topics中的流數(shù)據(jù)。

Streams API:該接口允許應(yīng)用作為一個(gè)流處理器(stream processor) ,從一個(gè)或多個(gè)topics 的輸入流中消費(fèi)數(shù)據(jù),然后轉(zhuǎn)換并生產(chǎn)數(shù)據(jù)到一個(gè)或多個(gè)topics的輸出流中。

Connector API:該接口允許構(gòu)建和運(yùn)行可重用的生產(chǎn)者(Producer)或者消費(fèi)者(Consumer),這些生產(chǎn)者或消費(fèi)者講Kafka中的topics和現(xiàn)有的應(yīng)用或者數(shù)據(jù)系統(tǒng)(如數(shù)據(jù)庫(kù))連接起來(lái)。比如一個(gè)connector 可以連接到一個(gè)關(guān)系型數(shù)據(jù)庫(kù)從而可以捕捉到數(shù)據(jù)表中的任何變化,然后進(jìn)行響應(yīng)的處理。
 

其它答案
冰闊落2020-06-22 18:56:36

Apache Kafka是一個(gè)分布式發(fā)布—訂閱消息系統(tǒng)和一個(gè)強(qiáng)大的隊(duì)列,可以處理大量的數(shù)據(jù),并使你能夠?qū)⑾囊粋(gè)端點(diǎn)傳遞到另一個(gè)端點(diǎn)。Kafka適合離線和在線消息消費(fèi)。Kafka消息保留在磁盤上,并在群集內(nèi)復(fù)制以防止數(shù)據(jù)丟失。Kafka構(gòu)建在ZooKeeper同步服務(wù)之上。它與Apache Storm和Spark非常好地集成,用于實(shí)時(shí)流式數(shù)據(jù)分析。

Kafka 是一個(gè)分布式消息隊(duì)列,具有高性能、持久化、多副本備份、橫向擴(kuò)展能力。生產(chǎn)者往隊(duì)列里寫消息,消費(fèi)者從隊(duì)列里取消息進(jìn)行業(yè)務(wù)邏輯。一般在架構(gòu)設(shè)計(jì)中起到解耦、削峰、異步處理的作用。

中公旗下IT培訓(xùn)品牌

  • 中公教育品牌

     中公教育是一家中國(guó)領(lǐng)先的全品類職業(yè)教育機(jī)構(gòu),提供超過(guò)100個(gè)品類的綜合職業(yè)就業(yè)培訓(xùn)服務(wù)。公司在全國(guó)超過(guò)1000個(gè)直營(yíng)網(wǎng)點(diǎn)展開(kāi)經(jīng)營(yíng),深度覆蓋300多個(gè)地級(jí)市,并正在快速向數(shù)千個(gè)縣城和高校擴(kuò)張。

  • 完善就業(yè)體系

    通過(guò)階段性授課機(jī)制,和每階段的定期考核,先讓學(xué)員能夠?qū)W會(huì)所學(xué)內(nèi)容,才能找打合適工作。最后一個(gè)階段為就業(yè)課程,從技術(shù)和面試兩個(gè)方面加深就業(yè)能力,并且還有不定期的雙選會(huì)供大家選擇。

  • 全程面授+實(shí)戰(zhàn)技術(shù)

    線下課程全程是師資面對(duì)面教學(xué),不會(huì)存在上課只對(duì)著大屏幕上課的情況,有問(wèn)題都可以在課上得到解答。并且優(yōu)就業(yè)通過(guò)自主研發(fā)大綱和學(xué)習(xí)路線,并且定期更新課程所學(xué)技術(shù),讓大家所學(xué)技術(shù)不落伍。

中公優(yōu)就業(yè)專業(yè)職業(yè)規(guī)劃老師

為您詳細(xì)答疑解惑,更能領(lǐng)取免費(fèi)課程

相關(guān)問(wèn)題

更多課程

專業(yè)課程老師將第一時(shí)間為您解答

立即答疑
修改
優(yōu)就業(yè):ujiuye

關(guān)注中公優(yōu)就業(yè)官方微信

  • 關(guān)注微信回復(fù)關(guān)鍵詞“大禮包”,領(lǐng)80G學(xué)習(xí)資料