监控nifi数据来源_bub轻松复现-大数据之Nifi工作笔记0011

​编辑

通过数据流功能可以轻松复现,数据的流向在某个时间点数据是怎么流动的,出现了什么问题,太强大了..

真的是,可以看到通过右键,处理器,打开view data province就可以看到, 上面是处理器处理数据的详细信息

​编辑

​编辑

点击左侧的详情图标可以查看详情信息,details是这个事件处理的内容详情,也就是事件的详情信息

​编辑

​编辑

这里可以看到执行这个时间点对应的时间的时候flowfile的属性信息

​编辑

然后 这里可以看到,可以查看flowfile的内容 content,可以点击view查看,也可以下载

​编辑

这里很重要还有一个重播功能

​编辑

可以看到这个重播功能这里可以复现数据流的流向以及过程,太重要了,可以复现这个数据

以及bug是怎么产生的.在具体什么位置产生的

​编辑

谱系图这个也很厉害,可以查看数据流的过程中,把数据流可视化,发生的事件,都可以看

​编辑

而且一些join等操作,还可以查看对应的父子信息,比如谁跟这个flowfile进行join的等等 ,太厉害了吧

​编辑

​编辑

然后左侧这个滑块很重要,拖动就可以看到数据流在每个时间点的具体状态

​编辑

我们实际看一下,首先选择一个处理器,然后view data provenance点击

​编辑

可以看到这个时间点的flowfile详情

​编辑

以及flowfile的内容,以及flowfile的属性等

​编辑

可以看到内容这里可以点击view查看具体内容

​编辑

比如这里具体的内容我们之前写入的

​编辑

通过这里view 就可以看,而且可以down下载

​编辑

然后这里还有一个replay功能,这个重播功能很重要 ,点击以后,就可以让数据从新从这个节点,再流过一次,

这样就可以进一步确认错误的位置

​编辑

然后点击上面右边那个按钮还可以显示谱系图

​编辑

可以看到左侧有一个滑块,可以拖动,来显示不同时间点,发生了什么事件,以及数据的流动过程.

​