betacat01 Goto Github PK

administrative-divisions-of-china

中华人民共和国行政区划：省级（省份直辖市自治区）、 地级（城市）、 县级（区县）、 乡级（乡镇街道）、 村级（村委会居委会） ，**省市区镇村二级三级四级五级联动地址数据 Node.js 爬虫。

alchemy

给flink开发的web系统。支持页面上定义udf，进行sql和jar任务的提交；支持source、sink、job的管理；可以管理openshift上的flink集群

aqicrawler

scrapy框架，chrome headless

auto.js-backup

A UiAutomator on android, does not need root access

autojs-web-control

AutoJs Web Control

big-whale

Spark、Flink等离线任务的调度以及实时任务的监控

bigdata-book

上百本大数据电子书，附带下载链接，包括计算机基础，Java，hadoop，spark，flink，kafka，hbase，hive，数仓等

bigdata-examples

分享一些在工作中的大数据实战案例，包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】，一起成长。

bigdata-interview

最全的大数据大厂面试宝典，大数据面试题，大数据面试，王傲旗的大数据之路，大数据成神之路，Flink/Spark/Hadoop/Hbase/Hive/Impala/Hbase/MapReduce/YARN/HDFS/Kafka/Flume/Linux/Java/Scala...面试题

bookhunter

A download tools for clawing the ebooks from internets.

brickhouse

Hive UDF's for the data warehouse

cachecloud

搜狐视频(sohu tv)Redis私有云平台

canal

阿里巴巴 MySQL binlog 增量订阅&消费组件

cep-monitoring

Apache Flink example CEP program to monitor data center temperatures

clash_for_windows_pkg

A Windows/macOS GUI based on Clash

cloudflarespeedtest

🌩「自选优选 IP」测试 Cloudflare CDN 延迟和速度，获取最快 IP ！当然也支持其他 CDN / 网站 IP ~

cnc_remastered_collection

crawlab

Distributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台，支持任何语言和框架

data-warehouse-flink

基于Flink对用户行为数据的实时分析

dataflow-analysis

数据流分析技术工程汇总

dataspherestudio

DataSphereStudio is a one stop data application development& management portal, covering scenarios including data exchange, desensitization/cleansing, analysis/mining, quality measurement, visualization, and task scheduling.

datax-admin

DataX分布式集群与负载均衡、任务执行/统计，基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步

datax-web

DataX集成可视化页面，选择数据源一键生成JSON并脱敏，集成定时任务，支持分布式，支持增量获取，实时查看运行日志，监控执行器资源，kill运行进程。

datax-web-ui

DataX Web UI

dbblog

基于SpringBoot2.x+Vue2.x+ElementUI+Iview+Elasticsearch+RabbitMQ+Redis+Shiro的多模块前后端分离的博客项目

dejavu

The Missing Web UI for Elasticsearch: Import, browse and edit data with rich filters and query views, create search UIs visually.

django-dynamic-scraper

Creating Scrapy scrapers via the Django admin interface

dpkb

大数据相关内容汇总，包括分布式存储引擎、分布式计算引擎、数仓建设等。关键词：Hadoop、HBase、ES、Kudu、Hive、Presto、Spark、Flink、Kylin、ClickHouse

drawio

drdcdevicemonitor

DRDCDeviceMonitor Flink+Kafka+redis+rabbitmq实现的实时智能运维系统。