關于自己

本人大數據技術專業一枚大一學生，馬上大二了，大一過的好快啊，感覺什么也沒有學到，好像虛度了大一。我是一個熱愛運動的人，喜歡打籃球，乒乓球和羽毛球。喜歡打游戲，但技術很菜。

對大數據的認識

大數據(Big data)
我對于大數據的認知是：短時間內快速產生的大量且多種多樣的有價值的信息，是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。有“4V”特點，即數據量大、處理速度快、數據種類繁多和價值密度低。適用于大數據的技術，包括大規模并行處理（MPP）數據庫、數據挖掘電網、分布式文件系統、分布式數據庫、云計算平臺、互聯網和可擴展的存儲系統。從某種程度上說，大數據是數據分析的前沿技術。簡言之，從各種各樣類型的數據中，快速獲得有價值信息的能力，就是大數據技術，當前用于分析大數據的工具主要有Hadoop。
大數據無處不在，大數據應用于各個行業，
例如汽車行業：利用大數據和物聯網技術實現無人駕駛汽車；
物流行業：利用大數據優化物流網絡，提高物流效率，降低物流成本等等；
大數據還可以應用于個人生活，利用與每個人相關聯的“個人大數據”，分析個人生活行為習慣，為其提供更加周到的個性化服務。

大數據場景分析

**利用百度API解析地址**

最近在研究把十萬個地址數據，進行地址，進行經緯度轉換。最后得到的數據格式：地址，經緯度，省份，市區，街道。我還沒有成功做出來，就簡單步驟進行分析。這個主要用Python來進行操作。
申請百度地圖的秘鑰
地圖api 說明：https://lbs.qq.com/service/webService/webServiceGuide/webServiceOverview

獲取地址對應的經緯度——地理編碼
其中：
address：所查詢的地名；
city：查詢地區的城市，「可以省略」，主要是為了限定地區排除部分城市地區重名問題；
json：輸出格式為json格式，方便后期獲取地址；
ak：即上面我們獲取的API Key；

.調用API將經緯度信息解析成json信息

可以自行通過json格式選擇自己想要的數據，比如國家、省份、市區等

批量轉換信息

Python的實現
主要用到的數據庫有：request

本次實訓的收獲與感想

在為期四天的專業認知中，我對自己進行了更深刻的認識，我學到了很多書本上我學不到東西,通過這次的認知給我們提供了一次理論聯系實際的機會。在認知過程中所學到的讓我受益匪淺。為我在以后的學習中打下了基礎。
總的來說,在此次認知實習中，才發現自己專業性的知識只接觸個皮毛,編程不是那么簡單，學習的東西還很多，以后會更加努力，希望成為一個合格的程序員。

總結

以上是生活随笔為你收集整理的大数据认知的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。