导语: PiFlow是一个简单易用,功能强大的大数据流水线系统。包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。特性:1、简单易用可视化配置流水线。监控流水线。查看流水线日志。检查点功能。2、扩展性强:支持自定义开发数据处理组件。3、性能优越:基于分布式计算引擎Spark开发。4、功能强大:提供100+的数据处理组件。包括Hadoop 、Spark、MLlib、Hi
源码属性:
授权方式:开源 源码大小:93.91MB 源码语言:Scala 运行环境 Scala
功能介绍:
PiFlow是一个简单易用,功能强大的大数据流水线系统。包含丰富的处理器组件,提供Shell、DSL、Web配置界面、任务调度、任务监控等功能。
特性: 1、简单易用 可视化配置流水线。 监控流水线。 查看流水线日志。 检查点功能。 2、扩展性强: 支持自定义开发数据处理组件。 3、性能优越: 基于分布式计算引擎Spark开发。 4、功能强大: 提供100+的数据处理组件。 包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等。 集成了微生物领域的相关算法。
环境要求: JDK 1.8 Spark-2.11.8 Apache Maven 3.1.0 Spark-2.1.0 及以上版本 Hadoop-2.6.0
1、本文来自 系统源码介绍 投稿的内容 PiFlow(大数据流水线系统) v1.6是什么样的 ,所有言论和图片纯属作者个人意见,版权归原作者所有;不代表 本站 立场;
2、本站所有文章、图片、资源等如果未标明原创,均为收集自互联网公开资源;分享的图片、资源、视频等,出镜模特均为成年女性正常写真内容,版权归原作者所有,仅作为个人学习、研究以及欣赏!如有涉及下载请24小时内删除;
3、如果您发现本站上有侵犯您的权益的作品,请与我们取得联系,我们会及时修改、删除并致以最深的歉意。邮箱: i-hu#(#换@)foxmail.com
2、本站所有文章、图片、资源等如果未标明原创,均为收集自互联网公开资源;分享的图片、资源、视频等,出镜模特均为成年女性正常写真内容,版权归原作者所有,仅作为个人学习、研究以及欣赏!如有涉及下载请24小时内删除;
3、如果您发现本站上有侵犯您的权益的作品,请与我们取得联系,我们会及时修改、删除并致以最深的歉意。邮箱: i-hu#(#换@)foxmail.com