共計 1163 個字符,預計需要花費 3 分鐘才能閱讀完成。
本篇內容介紹了“Storm DRPC 集群搭建的方法是什么”的有關知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓丸趣 TV 小編帶領大家學習一下如何處理這些情況吧!希望大家仔細閱讀,能夠學有所成!
1、什么是 DRPC
RPC: 遠程過程調用協議
DRPC:rpc 請求流式,并進行處理
RPC 請求參數當做輸入流,結果當做輸出流
利用 Strom 的分布式進行處理機制和能力
借助 RPC server 接收請求,返回響應
* storm 只能獲取數據,不能接請求和發響應,所以這里借助一個 DRPC Server 來幫忙完成
* DRPC 服務器協調:1、接收一個 rpc 請求;2、發送請求到 storm topology;3、從 storm topology 接收結果;4、把結果發回給等待的客戶端。
2、DRPC 的集群搭建
導入安裝包
pip-8.0.0.tar.gz
setuptools-19.6.tar.gz
thrift-0.9.3.tar.gz
## 使用 root 用戶安裝 python 模塊
1)、安裝 python 模塊、安裝 thrift
tar -zxvf pip-8.0.0.tar.gz
tar -zxvf setuptools-19.6.tar.gz
cd setuptools-19.6
python setup.py install
cd ../pip-8.0.0
python setup.py install
tar -zxvf thrift-0.9.3.tar.gz
cd thrift-0.9.3
python setup.py install
2)更改 storm 配置
vim conf/storm.yaml
drpc.servers:
– node1
scp storm.yaml root@node12:/usr/storm/conf/
scp storm.yaml root@node13:/usr/storm/conf/
3)、啟動 drpc
前提啟動 storm 集群
zkServer.sh start
bin/storm drpc
4)測試
bin/storm jar examples/storm-starter/storm-starter-topologies-0.9.4.jar storm.starter.BasicDRPCTopology drpc
在源碼包有一個執行任務的命令
目錄:/usr/apache-storm-0.9.4/storm-core/src/py/storm
./DistributedRPC-remote -h 192.168.47.21:3772 -f execute exclamation testdfdf
“Storm DRPC 集群搭建的方法是什么”的內容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業相關的知識可以關注丸趣 TV 網站,丸趣 TV 小編將為大家輸出更多高質量的實用文章!