开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总

本文主要是介绍开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

工具包

HPPC

High Performance Primitive Collections https://github.com/carrotsearch/hppc

Hutool

一个小而全的Java工具类库

EasyExcel

JAVA解析Excel工具EasyExcel https://github.com/alibaba/easyexcel/

pinyin4j

https://github.com/belerweb/pinyin4j

stream-lib

实时计算工具库 stream-lib 唯一值计算 HyperLogLog 集合成员测试 BloomFilter Top K 排名 CountMinSketch 分位数计算 T-Digest

Kryo

RPC之序列化篇

args4j

中间件

OpenFeign

  • OpenFeign简介及@FeignClient等注解的使用

apollo

首先,Apollo是我看到的文档很完善的中间件之一。
官网介绍:Apollo(阿波罗)是一款可靠的分布式配置管理中心,诞生于携程框架研发部,能够集中化管理应用不同环境、不同集群的配置,配置修改后能够实时推送到应用端,并且具备规范的权限、流程治理等特性,适用于微服务配置管理场景。服务端基于Spring Boot和Spring Cloud开发,打包后可以直接运行,不需要额外安装Tomcat等应用容器。

文档地址

不过,让我比较震惊的是,看到了下面这个。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-0mNQxGIZ-1641190378214)(C:\Users\jm017775\AppData\Roaming\Typora\typora-user-images\image-20211229151246628.png)]

这个JSON如此熟悉,这不就是之前平安项目开发时,添加修改配置使用的JSON格式么?基本上可以断定平安的DEVOPS 配置管理是使用的类似Apollo的第三方应用接入的方式。

Canal

用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费

官网增量变更同步方案如下:
在这里插入图片描述

LogStash

Logstash 性能及其替代方案
[整理] 日志采集工具:Logstash、Filebeat、Fluentd、Logagent、rsyslog对比

DataX

DataX 是阿里开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。
DataX介绍以及优缺点分析

Kafka

Hive

HBase

Spark

Filnk

Flink详细介绍

ClickHouse

Redis

DolPhinScheduler

WebSocket

Presto

【Presto实现原理和美团的使用实践】
https://github.com/prestodb/f8-2019-demo

Hadoop

官网

【使用docker-compose创建hadoop集群】

注意:需要加端口映射,否则本地访问不了,

ports:

  • “127.0.0.1:50070:50070”

基于docker-compose的hive搭建
Presto Start https://prestodb.io/getting-started.html

MapReduce

MapReduce介绍

JAVA 基础

JMX https://www.jianshu.com/p/de85fad05dcb

RMI https://www.cnblogs.com/langtianya/p/4939077.html

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XWsuwkDr-1641190378216)(C:\Users\jm017775\AppData\Roaming\Typora\typora-user-images\image-20211230153942569.png)]

这篇关于开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1007716

相关文章

Python FastAPI+Celery+RabbitMQ实现分布式图片水印处理系统

《PythonFastAPI+Celery+RabbitMQ实现分布式图片水印处理系统》这篇文章主要为大家详细介绍了PythonFastAPI如何结合Celery以及RabbitMQ实现简单的分布式... 实现思路FastAPI 服务器Celery 任务队列RabbitMQ 作为消息代理定时任务处理完整

Linux系统中卸载与安装JDK的详细教程

《Linux系统中卸载与安装JDK的详细教程》本文详细介绍了如何在Linux系统中通过Xshell和Xftp工具连接与传输文件,然后进行JDK的安装与卸载,安装步骤包括连接Linux、传输JDK安装包... 目录1、卸载1.1 linux删除自带的JDK1.2 Linux上卸载自己安装的JDK2、安装2.1

Spring Boot + MyBatis Plus 高效开发实战从入门到进阶优化(推荐)

《SpringBoot+MyBatisPlus高效开发实战从入门到进阶优化(推荐)》本文将详细介绍SpringBoot+MyBatisPlus的完整开发流程,并深入剖析分页查询、批量操作、动... 目录Spring Boot + MyBATis Plus 高效开发实战:从入门到进阶优化1. MyBatis

Python基于wxPython和FFmpeg开发一个视频标签工具

《Python基于wxPython和FFmpeg开发一个视频标签工具》在当今数字媒体时代,视频内容的管理和标记变得越来越重要,无论是研究人员需要对实验视频进行时间点标记,还是个人用户希望对家庭视频进行... 目录引言1. 应用概述2. 技术栈分析2.1 核心库和模块2.2 wxpython作为GUI选择的优

利用Python开发Markdown表格结构转换为Excel工具

《利用Python开发Markdown表格结构转换为Excel工具》在数据管理和文档编写过程中,我们经常使用Markdown来记录表格数据,但它没有Excel使用方便,所以本文将使用Python编写一... 目录1.完整代码2. 项目概述3. 代码解析3.1 依赖库3.2 GUI 设计3.3 解析 Mark

利用Go语言开发文件操作工具轻松处理所有文件

《利用Go语言开发文件操作工具轻松处理所有文件》在后端开发中,文件操作是一个非常常见但又容易出错的场景,本文小编要向大家介绍一个强大的Go语言文件操作工具库,它能帮你轻松处理各种文件操作场景... 目录为什么需要这个工具?核心功能详解1. 文件/目录存javascript在性检查2. 批量创建目录3. 文件

Linux系统之主机网络配置方式

《Linux系统之主机网络配置方式》:本文主要介绍Linux系统之主机网络配置方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、查看主机的网络参数1、查看主机名2、查看IP地址3、查看网关4、查看DNS二、配置网卡1、修改网卡配置文件2、nmcli工具【通用

Linux系统之dns域名解析全过程

《Linux系统之dns域名解析全过程》:本文主要介绍Linux系统之dns域名解析全过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、dns域名解析介绍1、DNS核心概念1.1 区域 zone1.2 记录 record二、DNS服务的配置1、正向解析的配置

Linux系统中配置静态IP地址的详细步骤

《Linux系统中配置静态IP地址的详细步骤》本文详细介绍了在Linux系统中配置静态IP地址的五个步骤,包括打开终端、编辑网络配置文件、配置IP地址、保存并重启网络服务,这对于系统管理员和新手都极具... 目录步骤一:打开终端步骤二:编辑网络配置文件步骤三:配置静态IP地址步骤四:保存并关闭文件步骤五:重

基于Python开发批量提取Excel图片的小工具

《基于Python开发批量提取Excel图片的小工具》这篇文章主要为大家详细介绍了如何使用Python中的openpyxl库开发一个小工具,可以实现批量提取Excel图片,有需要的小伙伴可以参考一下... 目前有一个需求,就是批量读取当前目录下所有文件夹里的Excel文件,去获取出Excel文件中的图片,并