【大数据论文笔记】大数据技术研究综述
大數據的基本概念:
1.大數據的產生
?????? a.科學研究
?????? b.物聯網的應用
?????? c.海量網絡信息的產生
2.大數據概念的提出
3.大數據的“4V”特征
??????? a.Volume(容量大):大數據巨大的數據量與數據完整性
??????? b.Variety(種類多):要在海量、種類繁多的數據間發現其內在關聯
??????? c.Velocity(速度快):更快地滿足實時性需求
??????? d.Value(價值密度低):將信息轉化為知識
4.大數據的應用領域
??????? a.商業
??????? b.金融
??????? c.醫療
??????? d.制造業
大數據的處理流程
?
1.數據采集
2.數據處理與集成(過濾)
3.數據分析(核心)
4.數據解釋(數據可視化)
大數據關鍵技術
1.云計算和MapReduce
云計算:
?????? a.服務IaaS
?????? b.平臺即服務PaaS
?????? c.軟件即服務SaaS
MapReduce:
?
2.分布式文件系統
GFS:主要采取主從結構(Master-Slave),通過數據分塊、追加更新等方式實現海量數據的高速存儲
3.分布式并行數據庫
BigTable:
NOSQL:
4.開源實現平臺Hadoop
5.大數據可視化
?
大數據帶來的挑戰:
1.大數據的安全與隱私問題
2.大數據的集成與管理問題
??????? a.數據存儲
??????? b.數據清洗
3.大數據的IT技術架構問題
??????? a.大數據分析技術
??????? b.數據融合
??????? c.大數據能耗問題
4.大數據的生態環境問題
轉載于:https://www.cnblogs.com/XBWer/p/4016114.html
總結
以上是生活随笔為你收集整理的【大数据论文笔记】大数据技术研究综述的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: S3C2440时钟系统详解
- 下一篇: UVA 10273 Eat or not