全部 Python新聞動態 Python技術文章 Python學習常見問題 技術問答
-
-
Sqoop有哪些指令？Sqoop指令介紹
Sqoop工具操作簡單，它提供了一系列的工具指令，來進行數據的導入、導出操作等。使用Sqoop解壓包中bin目錄下的“sqoop help”指令可以查看Sqoop支持的所有工具指令，具體效果如圖1所示。 查看全文>>
Python技術文章2021-07-26 |傳智教育 |Sqoop,sqoop指令
-
手把手教你搭建Hadoop高可用集群
掌握了Hadoop集群中的高可用架構后，接下來，我們來手把手教大家搭建一個Hadoop高可用集群，具體步驟如下： 查看全文>>
Python技術文章2021-07-26 |傳智教育 |高可用集群,高可用架構,Hadoop
-
Zookeeper數據發布與訂閱主要應用場景有哪些？
數據發布與訂閱模型，即所謂的全局配置中心，顧名思義就是發布者將需要全局統一管理的數據發布到Zookeeper節點上，供訂閱者動態獲取數據，實現配置信息的集中式管理和動態更新。例如全局的配置信息，服務式服務框架的服務地址列表等就非常適合使用。接下來，我們介紹一些數據發布與訂閱的主要應用場景。 查看全文>>
Python技術文章2021-07-26 |傳智教育 |數據發布與訂閱的應用場景,zookeeper,
-
為什么要給數據倉庫分層？每層具體的含義是什么？
大多數情況下，我們完成的數據體系卻是依賴復雜、層級混亂的，因此，我們需要一套行之有效的數據組織和管理方法來讓我們的數據體系更有序，這就是談到的數據分層。數據分層并不能解決所有的數據問題，但是，數據分層卻可以給我們帶來如下的好處： 查看全文>>
Python技術文章2021-07-23 |傳智教育 |Hive數據倉庫，Hive安裝
-
什么是線程？線程的分類
線程由線程ID、當前指令指針(PC)、寄存器集合和堆棧組成，它不能獨立擁有系統資源，但它可與同屬一個進程的其它線程共享該進程所擁有的全部資源。 查看全文>>
Python技術文章2021-07-20 |傳智教育 |什么是線程，線程的分類
-
Shuffle是什么？有哪些工作流程
map階段處理的數據如何傳遞給reduce階段，是MapReduce框架中關鍵的一個流程，這個流程就叫shuffle。本章節內容來看一下shuffle的工作流程和工作機制。 查看全文>>
Python技術文章2021-07-20 |傳智教育 |Shuffle的工作機制
-
Combiner的作用是什么？partition的作用是什么？
combiner其實屬于優化方案，由于帶寬限制，應該盡量map和reduce之間的數據傳輸數量。它在Map 端把同一個key的鍵值對合并在一起并計算，計算規則與reduce一致，所以combiner也可以看作特殊的Reducer。 查看全文>>
Python技術文章2021-07-20 |傳智教育 |Combiner的作用,partition的作用
-
通過fork()函數創建進程方法介紹
在Unix/Linux操作系統中，通過Python的os模塊中封裝的fork()函數可以輕松地創建一個進程。fork()函數的聲明如下： 查看全文>>
Python技術文章2021-07-20 |傳智教育 |python創建進程
-
