{"repo":"zhaoyachao/zdh_web","free":true,"listed":false,"github":"https://github.com/zhaoyachao/zdh_web","clone":"git clone https://github.com/zhaoyachao/zdh_web.git","description":"大数据采集,抽取平台,zdh_web是zdh系列服务的可视化管理平台，包含数据采集,调度,权限,审批流,私域营销等模块","language":"HTML","stars":536,"topics":["etl","spark","sparketl","data-collection","bigdata","data","collection","datapipeline","pipline","scheduler"],"license":"Apache-2.0","category":"data-pipelines","readme_excerpt":"Table of Contents generated with DocToc - READ MORE - 数据采集,处理,监控,调度,管理一体化平台 - 在线预览 - 快速开始 - 基础环境 - 配置修改(最少修改如下配置) - 源码编译 - 运行 - FAQ - 整体系统层次图 - 项目模块划分 - 开源/闭源版本 - 下载编译包 - 提示 - 特色 - 使用场景 - 主要功能 - 用到的技术体系 - 个人联系方式 - 权益 - 界面预览 - 交流群 - 支持&赞赏 READ MORE English description 数据采集,处理,监控,调度,管理一体化平台 因本项目没有其他文档,请使用者及开发者详细阅读完本readme 文档,后期会以博客的形式对本项目进行详细功能说明 博客目录地址： https://blog.csdn.net/zhaoyachao123/article/details/113913947 欢迎你对本项目提出相关issue 本平台主要目的 + 高效的进行数据采集,构建自己的大数据平台 + 统一数据管理,对数据进行高效分析及对外输出 + 通过工具完成大部分工作,减少开发者的工作量 + 降低使用者标准,通过拖拉拽实现数据的采集(任务依赖关系由自带调度完成-优势) + 本平台的初衷及目的尽量减少开发者的工作量及降低数据开发者的使用门槛 + 基于当前大数据平台开发智能营销风控系统 + 学习技术并结合场景迭代产品 在线预览 http://zycblog.cn:8081/login 用户名：zyc 密码：123456 服务器资源有限,界面只供预览,不包含数据处理部分,谢码友们手下留情 快速开始 基础环境 1 执行编译好的包需要提前安装mysql8,redis 2 jdk1.8 (不支持jdk8以上的版本) 3 v5.5.0版本及之后至少需要jdk1.8, springboot版本升级为2.3.4版本 配置修改(最少修改如下配置) 1 修改服务器端口默认8081 对应参数server.port = 8081 2 修改数据源连接(默认支持mysql8),外部数据库必须引入 3 修改redis配置 spring.redis.开头参数 4 修改application- 配置文件中myid(多个服务依次1,2,3,...) 对应参数myid=1 5 修改bin/start.sh bin/zdh web.sh 脚本RUN MODE参数用于选择配置文件 此步骤最为重要,不可缺少, 默认RUN MODE=prod 使用application-prod配置文件 源码编译 sh build.sh 运行 4.7.13 之前 在target 目录下找到zdh web.jar 执行 java -Dfile.encoding=utf-8 -jar zdh web.jar 4.7.13及之后5.1.1之前 进入在xxx-RELEASE 目录下 执行 java -jar -Dfile.encoding=utf-8 -Dloader.path=libs/,conf zdh web.jar 5.1.1及之后 进入在xxx-RELEASE 目录下 启动执行 sh bin/start.sh 或者 sh bin/zdh web.sh start 关闭执行 sh bin/stop.sh 或者 sh bin/zdh web.sh stop idea开发工具运行源码须知 需要提前设置环境变量,edit configurations- enviorment variables","default_branch":null,"files":null,"tree":[],"storefront":"/r/zhaoyachao","claimed":false,"request_supported":{"post":"https://gitbuyer.com/r/zhaoyachao/zdh_web/request-supported","requests":0},"note":"indexed from public GitHub; nothing is for sale on this page. Clone it from GitHub. Paid listings live at /search."}