猜您喜欢:
PiFlow是一个扩展性强，性能优越，简单易用的大数据流水线系统，提供了100+的数据处理组件，包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等，欢迎下载使用！
可视化配置流水线
监控流水线
查看流水线日志
检查点功能
支持自定义开发数据处理组件
基于分布式计算引擎Spark开发
集成了微生物领域的相关算法
解压piflow-server-v0.9.tar.gz:
tar -zxvf piflow-server-v0.9.tar.gz
编辑配置文件config.properties
运行、停止、重启PiFlow Server
start.sh、stop.sh、 restart.sh、 status.sh
测试 PiFlow Server
设置环境变量 PIFLOW_HOME
vim /etc/profile
export PIFLOW_HOME=/yourPiflowPath/bin
export PATH=PATH:PIFLOW_HOME/bin
运行如下命令
piflow flow start example/mockDataFlow.json
piflow flow stop appID
piflow flow info appID
piflow flow log appID
piflow flowGroup start example/mockDataGroup.json
piflow flowGroup stop groupId
piflow flowGroup info groupId
如何配置
config.properties
#spark and yarn config
spark.master=yarn
spark.deploy.mode=cluster
#hdfs default file system
fs.defaultFS=hdfs://10.0.86.191:9000
#yarn resourcemanager.hostname
yarn.resourcemanager.hostname=10.0.86.191
#if you want to use hive, set hive metastore uris
#hive.metastore.uris=thrift://10.0.88.71:9083
#show data in log, set 0 if you do not want to show data in logs
data.show=10
#server port
server.port=8002
#h2db port
h2.port=50002
以上就是非凡软件站小编今日为大家带来的PiFlow(大数据流水线系统)，更多软件下载尽在非凡软件站。
数据分析软件大全 企业采用优秀的数据分析软件开展业务可以获得巨大的竞争优势，尤其是当这些数据工具更多地使用增强分析时，数据分析软件能够挖掘跟踪从当前销售到历史库存的各种业务活动的数据，并根据数据科学家的建议进行处理。接下来非凡软件站小编就给大家带来数据分析软件大全下载，感兴趣的小伙伴们速来看看吧~~
酷狗音乐大字版让不同年龄段的用户使用起来更加的方便，所有的功能也是记恨全面的，还能够一键设置和管理铃声，本期小编给大家带来了详细的操作攻略，有想知道的朋友千万不要错过！酷狗大字版设置铃声方法分享1、找到酷狗大字版，打开我的界面，选择“音乐电话”。2、打开音乐电话，选择“个性铃声”选项。3、打开铃声库，选择喜欢的铃声，选择右侧“设铃声”。4、打开修改系统设置，找到“允许修改系统设置”，即可将选择的铃
你是否曾经误删了珍贵的照片，并且使用了360清理大师的粉碎功能?别担心，即使照片被粉碎了，也有可能通过一些方法恢复。那么，在使用360清理大师时，如果不小心粉碎了重要照片，我们该如何恢复呢?接下来，小编我将为你详细介绍360清理大师恢复粉碎照片的具体步骤，帮助你找回那些珍贵的回忆。360清理大师数据恢复教程分享1. 打开“360清理大师”2. 找到“隐私粉碎”3. 进入“隐私清理”开始扫描4. 点
随手记，作为一款备受欢迎的记账应用，以其丰富的功能和便捷的操作赢得了众多用户的喜爱。为了进一步提升用户体验，随手记特别推出了抽屉模式，让界面更加简洁明了。那么，你是否也想了解，该如何轻松开启抽屉模式呢?接下来，就和小编一同来探索这一功能的开启方法，享受更加流畅的记账体验吧!随手记设置记账模式流程介绍1. 打开随手记APP，点击界面中的【记账设置】。2. 在随手记的记账设置界面中，点击【记一笔样式】
你是否知道在江苏智慧人社平台上该如何办理灵活就业相关手续呢?这一平台为灵活就业人员提供了极大的便利。接下来，我们就来一起探索一下，在江苏智慧人社上办理灵活就业的具体位置和流程，你是否也想了解更多呢?江苏智慧人社登记灵活就业方法一览1、进入江苏智慧人社APP，选择相应的登录方式进行账号的登录2、登录江苏智慧人社，点击我的，查看个人账户是否实名认证3、点击左下角的首页，点击右上方的全部点击进入4、进入
芒果tv让所有的用户都能够自由额选择不同的登录方式都是很好用的，在使用过程中还能够随时随地进行扫二维码登录，本期小编给大家带来了详细的操作攻略，有想知道的朋友千万不要错过！芒果tv扫二维码登录方法介绍1、打开芒果TV电脑版二维码登录，以及打开芒果TV手机版，点击首页左上角的扫一扫图标。 2、扫描网页版或电脑版的登录二维码。 3、点击确认登录，完成授权即可。 看完本篇资讯教程，想必大家都清楚了吧，非
哔哩哔哩这款软件的功能和操作方法都是很容易掌握的，不同的模式也是能够切换的，在使用过程中还能够一键关闭私信，小编已经为大家准备好了详细的攻略，希望对各位小伙伴们有所帮助。哔哩哔哩关闭私信的方法介绍1、在哔哩哔哩主页，点击右上角的信封图标进入消息界面。 2、点击右上角三个点，选择【消息设置】。 3、点击【未关注人消息】，开启【收起未关注人息】。 如果您觉得这篇教程对您有启发或帮助，不妨点赞、收藏并
本站所有资源（含游戏）均是软件作者、开发商投稿，任何涉及商业盈利目的均不得使用，否则产生的一切后果将由您自己承担！本站将不对任何资源负法律责任，所有资源请在下载后24小时内删除。
如侵犯了您的版权、商标等，请立刻联系我们并具体说明情况后，本站将尽快处理删除，联系
（版权说明注意事项）。若有关在线投稿、无法下载等问题，请与本站客服人员联系
！
用户可自行按线路选择相应的下载点，可以直接点击下载/另存为，若直接点击下载速度太慢，请尝试使用高速下载器。为确保下载的文件能正常使用，请使用WinRAR最新版本解压本站软件。
建议大家谨慎对待所下载的文件，大家在安装的时候务必留意每一步！关于360安全卫士或QQ电脑管家的有关提示，请自行注意选择操作。
