您當前的位置：需求庫 > 全域旅游大數(shù)據(jù)中心
1735
2020/04/23
咨詢需求
發(fā)布需求基本信息
- 需求標題 全域旅游大數(shù)據(jù)中心
- 需求主體 企業(yè)用戶
- 行業(yè)領域 軟件
-
需求介紹
一、項目名稱：
全域旅游大數(shù)據(jù)中心
二、項目內(nèi)容：
1.對多源異構的旅游數(shù)據(jù)進行采集、維護、查詢、分析
基于消息隊列流式數(shù)據(jù)采集，分布式處理
對旅游數(shù)據(jù)進行清洗、整理、轉(zhuǎn)換，提供數(shù)據(jù)可視化轉(zhuǎn)換和腳本轉(zhuǎn)換方式
對數(shù)據(jù)源個數(shù)據(jù)字段的質(zhì)量、內(nèi)容分布、統(tǒng)計、概貌、密度等信息進行探索提取，并支持不同數(shù)據(jù)的血緣關系
2.數(shù)據(jù)共享需求
基于數(shù)據(jù)資源目錄發(fā)布數(shù)據(jù)資源實現(xiàn)共享，根據(jù)資源類型和內(nèi)容確定共享方式
共享門戶：基于信息資源目前查看、瀏覽、共享申請等功能
三、技術需求：
cloudera Manager:集群管理
cloudera Manager service:集群監(jiān)控
HDFS：文件存儲
Yarn資源調(diào)度
Zookeeper :集群
kafka:消息對了
Hive：數(shù)據(jù)倉庫
Spark：計算引擎
Sqoop：數(shù)據(jù)查詢工具
Impala：查詢工具
四、技術指標（預期目標）：
希望做成2套系統(tǒng)：
數(shù)據(jù)集成處理子系統(tǒng)
數(shù)據(jù)共享系統(tǒng)
交易信息
- 項目總投資 面議
- 交易方式 其他
- 截止日期 2021/04/23
- 使用區(qū)域 江蘇省-南京市-玄武區(qū)
- 聯(lián)系人姓名 王小剛
- 聯(lián)系人電話 15802954800
- 分享至：
