分布式系统的概念 随着互联网的不断发展，大数据、高并发和快响应是互联网系统的必然要求。但是在大数据和高并发的情况下，要求快响应是比较苛刻的，因为大量的数据会导致查找数据的时间变长，高并发会使互联网系统因繁忙而变慢，进而影响响应速度。所以说单机系统已经不可能满足现在互联网了，为了满足互联网的苛刻要求，网站系统已经从单机系统发展为多台机器协作的系统，因而互联网系统已经从单机系统演变为多台机器的系统，我们把这种多台机器相互协作完成企业业务功能的系统，称为分布式系统。 微服务架构 因为分布式非常复杂，所以一直以来都没有权威的架构和设计,更多的只是前人的积累和实践。前人总结出了许多有用的理念，积累了许多...

如果给你一个包含一亿行数据的超大文件，让你将数据转化导入生产数据库，你会如何操作？ 上面的问题是接到的一个真实的业务需求，将一个老系统历史数据通过线下文件的方式迁移到新的生产系统。 由于时间紧，而数据量又超大，所以设计的过程想到一下解决办法：  拆分文件 多线程导入  拆分文件 首先我们可以写个小程序，或者使用拆分命令 split 将这个超大文件拆分一个个小文件。 -- 将一个大文件拆分成若干个小文件，每个文件 100000 行 split -l 100000 largeFile.txt -d -a 4 smallFile_ 复制代码 这里之所以选择先将大文件拆分，主要考虑到两个原因： 第一如...

一、前言 前面几篇我们讲了关于 Kafka 的基础架构以及搭建，从这篇开始我们就来源码分析一波。我们这用的 Kafka 版本是 2.7.0，其 Client 端是由 Java 实现，Server 端是由 Scala 来实现的，在使用 Kafka 时，Client 是用户最先接触到的部分，因此，我们从 Client 端开始，会先从 Producer 端开始，今天我们就来对 Producer 源码解析一番。 二、Producer 使用 首先我们先通过一段代码来展示 KafkaProducer 的使用方法。在下面的示例中，我们使用 KafkaProducer 实现向 Kafka 发送消息的功能。在示...

发生什么事了 Log4J 是一个应用非常广泛的Java库，就在前两天的2021年12月10日，Log4J的一个安全漏洞被公布了。那天正好是周五，很多程序员都在计划着怎么度过一个愉快的周末，不料这个安全漏洞的公开，使得全世界很多程序员不得不周末加班，有的甚至通宵达旦紧急应对。 漏洞编号为 CVE-2021-44228，攻击者利用这个新的零日漏洞，可以远程执行恶意代码。  零日漏洞（ zero-day ）通常是指还没有补丁的安全漏洞。零日漏洞利用（zero-day exploit）的程序对网络安全具有巨大威胁，因此零日漏洞不但是黑客的最爱，掌握多少零日漏洞也成为评价黑客技术水准的一个重要参数。  ...

前言 在日常开发工作中，我们往往需要自己去构建各种数据表所对应的持久化对象（PO）、用于操作数据库的接口（DAO）以及跟 DAO 所绑定的对应 XML。这都是一些重复性的操作，不需要多大技术含量，这时候我们不禁会去想，有没有一种工具，能够帮助我们去自动生成这些文件呢？答案是：有的！ 本文接下来的内容主要适用于使用 MyBatis 来做持久层框架开发的工作，如果不是使用 MyBatis，那么可能本文不太适合你的开发场景。 MyBatis Generator 简介 作为一个基于 MyBatis 的独立工具，MyBatis Generator 能够满足我们以上的要求，能够通过简单的配置去帮我们生成数...

一、内容概括 本文内容主要围绕JDK中的ThreadPoolExecutor展开，首先描述了ThreadPoolExecutor的构造流程以及内部状态管理的机理，随后用大量篇幅深入源码探究了ThreadPoolExecutor线程分配、任务处理、拒绝策略、启动停止等过程，其中对Worker内置类进行重点分析，内容不仅包含其工作原理，更对其设计思路进行了一定分析。文章内容既包含了源码流程分析，还具有设计思路探讨和二次开发实践。  二、构造ThreadPoolExecutor 2.1 线程池参数列表 大家可以通过如下构造方法创建线程池（其实还有其它构造器，大家可以深入源码进行查看，但最终都是调用下...

背景 对java的泛型特性的了解仅限于表面的浅浅一层，直到在学习设计模式时发现有不了解的用法，才想起详细的记录一下。 本文参考java 泛型详解、Java中的泛型方法、 java泛型详解 1. 概述 泛型在java中有很重要的地位，在面向对象编程及各种设计模式中有非常广泛的应用。 什么是泛型？为什么要使用泛型？ 泛型，即“参数化类型”。一提到参数，最熟悉的就是定义方法时有形参，然后调用此方法时传递实参。那么参数化类型怎么理解呢？ 顾名思义，就是将类型由原来的具体的类型参数化，类似于方法中的变量参数，此时类型也定义成参数形式（可以称之为类型形参）， 然后在使用/调用时传入具体的类型（类型实参）。...

1 流如何简化代码 如果有一个需求，需要对数据库查询到的菜肴进行一个处理：  筛选出卡路里小于400的菜肴 对筛选出的菜肴进行一个排序 获取排序后菜肴的名字  菜肴：Dish.java public class Dish {     private String name;     private boolean vegetarian;     private int calories;     private Type type;     // getter and setter } 复制代码 Java8以前的实现方式 private List<String> beforeJav...

1、对象属性和方法 class Person{ private String name ; private int age = 1; public void setName(String newName) { name = newName; } public String getName() { return name; } public void setAge(int newage) { if(newage >0 && newage<200) { age = newage; } } public int getAge() { return age; } } 2、构...

1. 什么是 Servlet？ 先让时间回到 25 年前，我国刚刚接入互联网不到两年时间。那时候的电脑长这个样子：  当时的网页技术还不是很发达，大家打开浏览器只能浏览一些静态的页面，例如图片、文本信息等。   随着时间的发展，静态页面已经不能满足于大部分用户的需求了。 用户打开浏览器不能只浏览个图片和文字吧？用户还想提交个表单、点个按钮、还想和浏览器做交互怎么办？ 为了解决用户和浏览器动态交互的问题，到了1997年，SUN 公司(发明了JDK) 推出了Servlet技术。 Servlet 是一个基于 Java 技术开发的 web 组件，它运行在服务器端，由 Servlet容器管理。主要用于处...

Eureka Server 为了提供响应效率，提供了两层的缓存结构，将 Eureka Client 所需要的注册信息，直接存储在缓存结构中，实现原理如下图所示。  第一层缓存：readOnlyCacheMap，本质上是 ConcurrentHashMap，依赖定时从 readWriteCacheMap 同步数据，默认时间为 30 秒。 readOnlyCacheMap ： 是一个 CurrentHashMap 只读缓存，这个主要是为了供客户端获取注册信息时使用，其缓存更新，依赖于定时器的更新，通过和 readWriteCacheMap 的值做对比，如果数据不一致，则以 readWriteCac...

前言 之前我们用docker部署了springboot,redis,mysql的项目，但是是部署在三个不同的容器里，还需要先知道redis和mysql的ip地址，手动配置到springboot应用容器里，我只是想快速在本地进行测试啊，这样成本太高了，有没有什么办法，把他们集中管理呢？比如把它构建成为一个镜像。 办法总是有的，那就是Docker Compose。 之前的项目地址：github.com/Damaer/Demo… 上一篇：aphysia.cn/archives/ru… Docker Compose 1. Docker Compose是什么？ Docker Compose其实就是用来定...

1 ElasticSearch 概述 1.1 全文搜索引擎 小伙伴们经常使用 google 或者百度进行搜索内容，在输入框中输入 关键字 ，这个时候，网站会将包含 关键字 的所有网页返回，大家有没有想过， 为什么输入关键字就可以查到结果呢？ 同时网站上返回的页面内容大多都是一些 非结构化 的文本数据，对于大量的文本数据，肯定是不会存储到 数据库 中的，原因如下： （1）非结构化文本数据，关系型数据库搜索不能很好支持全文索引扫描整张表。 （2）查询效率低下，即使对 SQL 进行大量优化，其效果也收效甚微。 （3）对于 insert 和 update 操作都会重新构建索引，维护非常麻烦。 针对上述...

高并发编程 提到并发编程很多人就会头疼了；首先就是一些基础概念：并发，并行，同步，异步，临界区，阻塞，非阻塞还有各种锁全都砸你脸上，随之而来的就是要保证程序运行时关键数据在多线程中的可见性、核心业务的原子性、多线程通信的有序性。虽然很多人工作可能接触不到这些的东西，但是面试就是得问。假如你跟一个有过高并发编程经验的人一起面试同一个岗位，你就是背了些面试题，而人家是确确实实有真东西的，那后续的录用结果想必就不用我多说了吧~ 当然你面试或者是工作中一直被这块困扰，想学习高并发编程却又苦于没一个明确的方向，完全不知道从哪入手的话，不妨来看看LZ下面要为大家介绍的阿里最近最新发布的高并发编程（终极版）...