如何理解Storm本地目录结构

103次阅读
没有评论

共计 1443 个字符,预计需要花费 4 分钟才能阅读完成。

本篇文章给大家分享的是有关如何理解 Storm 本地目录结构,丸趣 TV 小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着丸趣 TV 小编一起来看看吧。

      阅读背景:确保您已经成功的安装了 Storm,并且已经找到了 storm-local 的本地文件夹

      阅读目的:究竟在 Storm 的本地文件夹之有什么?持有到 zookeeper 上的信息已被大家所熟知,那么

持有到本地的信息了?

/{storm-local-dir}
 |
 |-/nimbus
 | |
 | |-/inbox --  从 nimbus 客户端上传的 jar 包
 | | |  会在这个目录里面
 | | |
 | | |-/stormjar-{uuid}.jar --  上传的 jar 包其中 {uuid} 表示
 | |  生成的一个 uuid
 | |
 | |-/stormdist
 | |
 | |-/{topology-id}
 | |
 | |-/stormjar.jar --  包含这个 topology 所有代码
 | |  的 jar 包(从 nimbus/inbox 里
 | |  面挪过来的)
 | |
 | |-/stormcode.ser --  这个 topology 对象的序列化
 | |
 | |-/stormconf.ser --  运行这个 topology 的配置
 |
 |-/supervisor
 | |
 | |-/stormdist
 | | |
 | | |-/{topology-id}
 | | |
 | | |-/resources --  这里保存的是 topology 的
 | | | jar 包里面的 resources 目录
 | | |  下面的所有文件
 | | |
 | | |-/stormjar.jar --  从 nimbus 机器上下载来的
 | | | topology 的 jar 包
 | | |
 | | |-/stormcode.ser --  从 nimbus 机器上下载来的
 | | |  这个 topology 对象的序列
 | | |  化形式
 | | |
 | | |-/stormconf.ser --  从 nimbus 机器上下载来的
 | |  运行这个 topology 的配置
 | |
 | |-/localstate -- supervisor 的 localstate
 | |
 | |-/tmp --  临时目录,从 Nimbus 上下
 | |  载的文件会先存在这个目
 | |  录里面,然后做一些简单
 | |  处理再 copy 到
 | | stormdist/{topology-id}
 | |  里面去
 | |-/{uuid}
 | |
 | |-/stormjar.jar --  从 Nimbus 上面 download 下
 |  来的工作 jar 包
 |
 |-/workers
 |
 |-/{worker-id}
 |
 |-/pids --  一个 worker 可能会起多个子
 | |  进程所以可能会有多个 pid
 | |
 | |-/{pid} --  运行这个 worker 的 JVM 的 pid
 |
 |-/heartbeats --  这个 supervisor 机器上的
 | worker 的心跳信息
 |
 |-/{worker-id} --  这里面存的是一个 worker
  的心跳:主要包括心跳时
  间和 worker 的 id

     

以上就是如何理解 Storm 本地目录结构,丸趣 TV 小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注丸趣 TV 行业资讯频道。

正文完
 
丸趣
版权声明:本站原创文章,由 丸趣 2023-08-25发表,共计1443字。
转载说明:除特殊说明外本站除技术相关以外文章皆由网络搜集发布,转载请注明出处。
评论(没有评论)