大數(shù)據(jù)又添新框架!Apache InLong畢業(yè)成為頂級項目程序源代碼關(guān)注共 1608字,需瀏覽 4分鐘 ·2022-06-28 06:05 本文首發(fā):鵝廠技術(shù)派Apache社區(qū)首個一站式大數(shù)據(jù)集成頂級項目正式誕生。剛剛獲悉,全球最大的開源軟件基金會Apache軟件基金會正式宣布,Apache InLong成功從Apache孵化器畢業(yè)成為社區(qū)頂級項目,這個最初由騰訊捐獻(xiàn)給Apache社區(qū)的一站式海量數(shù)據(jù)集成框架,可以為大數(shù)據(jù)開發(fā)者提供百萬億級數(shù)據(jù)流高性能處理能力,以及千億級數(shù)據(jù)流高可靠服務(wù)。點擊文末左下角“閱讀原文”查看Apache官博稍微科普一下,Apache軟件基金會對所有的 Apache 項目都要嚴(yán)格篩選并經(jīng)過孵化器孵化,滿足一系列質(zhì)量要求之后才可畢業(yè)。從孵化器里畢業(yè)的頂級項目,表明該項目的社區(qū)和產(chǎn)品已根據(jù)ASF的精英流程和原則得到良好管理。InLong中文名“應(yīng)龍”是中國神話中引流入海的神獸,意寓InLong在大數(shù)據(jù)社區(qū)生態(tài)中的價值:大數(shù)據(jù)接入集成。InLong以騰訊內(nèi)部使用的TDBank為基礎(chǔ),依托萬億級的數(shù)據(jù)攝取和處理能力,將數(shù)據(jù)采集、聚合、存儲、排序數(shù)據(jù)處理的全流程整合在一起。不僅提供自動、安全、可靠和高性能的數(shù)據(jù)傳輸能力,還支持基于流式的數(shù)據(jù)分析、建模和應(yīng)用,幫助企業(yè)簡化數(shù)據(jù)處理的過程。比如,InLong 作為一個基于SaaS的服務(wù)平臺,用戶可以選擇主題的數(shù)據(jù)發(fā)布和訂閱,來輕松快速地報告、傳輸和分發(fā)數(shù)據(jù),大幅降低了使用門檻。同時InLong可以為100萬億級數(shù)據(jù)流提供高性能處理能力,為1000億級數(shù)據(jù)流提供高可靠服務(wù),保障用戶享受到穩(wěn)定可靠的在線服務(wù)。InLong支持多種數(shù)據(jù)訪問方式,包括不同類型的消息隊列服務(wù)集成和實時數(shù)據(jù)提取、轉(zhuǎn)換、加載以及基于規(guī)則的排序功能;在服務(wù)方面,InLong為用戶提供統(tǒng)一的系統(tǒng)監(jiān)控和告警服務(wù)。通過細(xì)粒度的指標(biāo)來促進(jìn)數(shù)據(jù)可視化,用戶可以在統(tǒng)一的數(shù)據(jù)度量平臺中直接查看隊列的運行狀態(tài),大大提高了業(yè)務(wù)的主動性。實際上,在騰訊內(nèi)部InLong項目原名TubeMQ,主要專注于高性能、低成本的消息隊列服務(wù),并長期服務(wù)微信支付、騰訊視頻、廣點通等產(chǎn)品。為了進(jìn)一步釋放TubeMQ周邊的生態(tài)能力,騰訊將項目升級為InLong,專注打造一站式海量數(shù)據(jù)集成框架。該項目于2019年11月進(jìn)入 Apache 孵化器,2022 年6月畢業(yè)成為頂級項目。目前, Apache InLong已經(jīng)發(fā)布第12個版本,騰訊大數(shù)據(jù) InLong 團(tuán)隊和社區(qū)開發(fā)者一起,在孵化期間不斷更新和完善其功能,比如Manager 元數(shù)據(jù)管理重構(gòu)、基于 Flink SQL 的 Sort ETL 方案、基于標(biāo)簽的跨地域多集群等特性等,為社區(qū)和企業(yè)提供更多元化的開放解決方案。與此同時,InLong正在廣泛應(yīng)用于廣告、支付、社交、游戲、人工智能等各個行業(yè)領(lǐng)域,為多領(lǐng)域客戶提供高效化便捷化服務(wù)。值得一提的是,在此之前,騰訊另外的一個開源項目 Angel 也從 LF AI 基金會畢業(yè),成為世界頂級的 AI 開源項目。作為國內(nèi)國內(nèi)大數(shù)據(jù)領(lǐng)域開源最全面的公司,Apache InLong畢業(yè)成為Apache頂級項目,不僅創(chuàng)造了騰訊大數(shù)據(jù)團(tuán)隊在開源領(lǐng)域創(chuàng)造的又一里程碑,也將進(jìn)一步鞏固騰訊在大數(shù)據(jù)領(lǐng)域的領(lǐng)先地位。“我們很高興看到InLong踐行Apache Way,并以頂級項目的身份從Apache孵化器畢業(yè),”騰訊副總裁蔣杰表示:“騰訊致力于構(gòu)建開源生態(tài)系統(tǒng),讓全球開發(fā)者能夠平等便捷地利用開源代碼。作為騰訊最成功的開源項目之一,InLong廣泛應(yīng)用于騰訊內(nèi)部海量業(yè)務(wù)以及外部的金融、政府等關(guān)鍵業(yè)務(wù)。未來,騰訊將持續(xù)為社區(qū)貢獻(xiàn)我們的力量,攜手全球開發(fā)者共同構(gòu)建繁榮的大數(shù)據(jù)生態(tài)系統(tǒng)?!?/span>騰訊作為國內(nèi)最早擁抱開源的科技公司之一,截至目前在 Github 上共發(fā)布了超過 160 個開源項目,獲得了超過 40 萬名開發(fā)者的關(guān)注和 Star,穩(wěn)居全球開源企業(yè)貢獻(xiàn)榜前十。---END---推薦↓↓↓ 瀏覽 42點贊 評論 收藏 分享 手機掃一掃分享分享 舉報 評論圖片表情視頻評價全部評論推薦 Apache ShenYu 畢業(yè)成為 Apache 頂級項目!JavaGuide0Apache Linkis 正式畢業(yè)成為 Apache 頂級項目程序源代碼0如何成為 Apache 頂級項目 Committer?JavaGuide0Doris 畢業(yè)成為 Apache 頂級項目,獨家專訪百度 PALO 團(tuán)隊SegmentFault0從事大數(shù)據(jù)崗位,個人常用的Apache頂級項目小數(shù)志0Apache DolphinScheduler:國人主導(dǎo)的分布式工作流調(diào)度平臺正式成為 Apache 頂級項目肉眼品世界0Apache InLong分布式消息中間件系統(tǒng)ApacheInLong(原ApacheTubeMQ項目更名)是騰訊在2013年自研的分布式消息中間件系統(tǒng),專注服務(wù)大數(shù)據(jù)場景下海量數(shù)據(jù)的高性能存儲和傳輸,較之于眾多明星的開源MQ組件,TubeMQ在Apache InLong分布式消息中間件系統(tǒng)Apache InLong(原 Apache TubeMQ 項目更名)是騰訊在 2013 年自研的分給Apache頂級項目提了個BugJava3y0Apache頂級項目Ambari正式宣告退役!程序源代碼0點贊 評論 收藏 分享 手機掃一掃分享分享 舉報