avatar
文章
224
标签
10
分类
10
首页
归档
标签
分类
关于
Logo技术博客
搜索
首页
归档
标签
分类
关于

技术博客

Centos部署Hadoop集群实战指南
发表于2023-10-10|环境搭建|环境搭建
...
Centos一键部署Redis集群实战指南
发表于2023-10-10|环境搭建|环境搭建
在高并发和大数据量应用场景中,单机Redis实例往往成为系统性能瓶颈。为了提升Redis的扩展性和可靠性,搭建Redis集群是常见且有效的解决方案。本文将结合CentOS 7环境,以普通用户权限为例,详细介绍如何从零开始搭建一个包含三主三从节点的Redis集群,帮助你实现稳定、高效的分布式缓存服务。 环境准备操作系统及依赖 操作系统:CentOS 7 Redis版本支持:7.0.12、7.4.1 用户权限:普通用户权限即可完成所有操作 必须安装gcc编译器 执行 gcc -v 若提示 -bash: gcc: command not found,请先自行安装gcc。建议参考:CentOS离线一键安装gcc(含安装包+脚本)。 网络 确保三台服务器之间端口通信互通(包括Redis端口) 关闭防火墙或放开Redis相关端口(如6379、6380) 集群规划与资源获取集群结构规划 服务器 IP地址 Redis端口 node1 10.0.0.1 6379, 6380 node2 10.0.0.2 6379,...
Centos部署Kafka集群实战指南
发表于2023-10-10|环境搭建|环境搭建
本篇技术博文详细介绍了如何在 Linux 环境下完成 Kafka 集群的搭建,适用于需要部署高可用分布式消息队列的场景。文章内容采用循序渐进的方式,从环境准备到安装配置,再到操作脚本编写和集群管理,以及最终的验证集群运行状态,涵盖了 Kafka 集群搭建的每一个关键环节。 首先,文章对环境准备步骤进行了说明,包含服务器配置、用户管理、时钟同步、系统防护设置等多个细节,确保每台机器处于稳定的状态并具备必要的运行条件。所有基础配置均配有参考链接,方便读者扩展学习。 接着,文章规划了 Kafka 集群的节点分布,依据实际需求,提供具体 IP 配置及相应的 server.properties 文件参数调整方法。通过分发安装目录和逐节点配置,达成集群协作的目标,并强调了 IP 地址的自定义替换。 最后,博文分享了针对集群管理的操作脚本及相关命令,并通过 Kafka 进程和 Broker 状态验证了集群的成功搭建。无论您是 Kafka 的初学者还是有经验的开发人员,这篇文章都能为您提供完整、实用的指导与参考。 环境准备需要有三台 Centos7...
Centos部署Zookeeper集群实战指南
发表于2023-10-10|环境搭建|环境搭建
在分布式系统领域,Zookeeper 是一种流行的分布式协调服务,具备高可用性和可靠性,广泛应用于分布式系统的配置管理、名称服务以及分布式锁控制等场景。然而,为了更好地支持分布式环境,Zookeeper 集群的搭建至关重要。通过集群模式,系统可以实现更高的容错性,同时提供更稳定的服务。 本文详细讲解了在三台 CentOS7 服务器上部署 Zookeeper 集群的步骤。我们从环境准备开始,包括关闭防火墙、配置免密登录,以及安装必要的工具和依赖项。接下来,根据集群规划,逐步完成 Zookeeper 的安装、配置,以及节点之间的数据分发。此外,还分享了如何编写脚本来简化 Zookeeper 集群的启动、停止与状态监控操作,使运维更加高效。 最后,通过多种验证步骤确认集群的成功运行,包括查看节点进程和连接到集群执行命令。无论是新手还是有一定经验的开发者,都可以根据本文的分步指南轻松搭建一个完整的 Zookeeper 集群,为分布式应用的开发和部署提供坚实基础。 环境准备需要有三台 Centos7...
Centos部署ClickHouse集群实战指南
发表于2023-09-28|环境搭建|环境搭建
在大数据分析与实时查询需求日益增长的背景下,ClickHouse 作为一款高性能的列式数据库,凭借其出色的并发能力和极致的查询效率,已成为数据处理和分析领域的重要技术选择。本文将详细介绍如何在 CentOS7 操作系统上,使用离线 tgz 包部署方式,搭建一个高可用、可扩展的 ClickHouse 集群环境。通过整合 Zookeeper 实现副本同步控制,构建包含两个分片双副本的 ClickHouse 集群,为后续的大规模数据分析打下坚实基础。指南适用于网络限制严格或生产环境对稳定性要求较高的用户。 集群环境 注意本教程是基于tgz包离线方式搭建 系统环境Centos 7 集群的各个机器配置好免密登录 搭建好Zookeeper集群,集群机器为:two、three、four 机器 描述 one 节点1,副本1 two 节点1,副本2 three 节点2,副本1 four 节点2,副本2 清楚旧版本残余 仅限于tgz包安装的方式 rm -rf /var/lib/clickhouse rm -rf /etc/clickhouse-* rm...
Linux多台服务器之间免密登录
发表于2023-09-12|运维手册|运维手册
在日常的后端开发和运维工作中,我们经常需要频繁登录不同的服务器进行部署、排查问题或上传文件。传统的基于用户名和密码的登录方式既不安全又不高效。为此,我们可以利用 SSH 公钥认证的方式,实现无密码(免密)登录远程服务器,提升安全性与操作效率。 本文将一步步带你完成 SSH 公钥创建及远程服务器配置,实现 SSH 免密登录机群。 SSH 公钥认证简介SSH(Secure Shell)支持多种认证方式,其中公钥认证使用非对称加密(如 RSA、ECDSA、ED25519)机制,客户端通过私钥发起认证请求,远程服务器用已保存的公钥进行验证。它的优势为: 更高的安全性:避免密码泄露或暴力破解 更好的自动化支持:适用于脚本、CI/CD 流程中免交互登录 更高效的运维体验:无需每次连接服务器都输入密码 生成 SSH 密钥对打开终端,输入以下命令即可: 1ssh-keygen -t rsa -b 4096 -C "your_email@example.com" 参数说明: -t rsa:指定密钥类型为 RSA; -b 4096:密钥长度,建议使用...
Idea远程Debug Java应用
发表于2023-08-30|java|java
远程 Debug 是后端开发者在排查线下环境(如测试、预发布)问题时的利器。通过在本地 IDE 中连接远端服务器上的 Java 进程,我们可以像本地调试一样设置断点、查看变量、单步执行,极大地提高了问题定位的效率。 本文将带你全面了解 Java 应用在远程服务器上的 Debug 原理,并结合 Spring Boot 工程,详细讲解如何从本地设置调试参数并成功连接远端服务。 什么是远程 Debug?远程调试(Remote Debug)是 JVM 提供的一种调试机制,它基于 Java Debug Wire Protocol(JDWP)协议。该协议允许调试器通过 socket 与目标 Java 虚拟机通信,从而实现跨进程、跨网络的调试能力。 原理简述: 我们在本地 IDE(如 IntelliJ IDEA)中配置远程调试端口并启动监听。 服务器端 Java 应用通过 JVM 参数开启 JDWP 支持,并开放特定端口监听。 本地与远端通过 socket...
SpringBoot整合Redis单机/哨兵/集群模式指南
发表于2023-07-21|java|java
本文旨在为后端开发者提供一份在 Spring Boot 项目中整合 Redis 的实践指南,涵盖单节点、主从、哨兵及集群四种常见部署模式。我们将探讨每种模式的配置方法、适用场景及关键注意事项,帮助您根据实际需求选择并实施最合适的 Redis 解决方案。 核心技术栈: Spring Boot, Redis, Lettuce (Spring Boot 2.x 默认 Redis 客户端) 项目仓库:github gitee 通用配置与基础在深入不同模式之前,我们需要引入必要的 Maven 依赖并配置基础的 RedisTemplate,以便在 Spring Boot 应用中与 Redis 进行交互。 Maven 依赖引入确保您的 pom.xml 文件包含以下依赖: 123456789101112131415161718192021222324252627282930313233<parent> <groupId>org.springframework.boot</groupId> ...
Centos部署Redis主从、哨兵、集群实战指南
发表于2023-07-21|环境搭建|环境搭建
Redis 作为一款高性能的键值数据库,在现代 Web 应用中扮演着至关重要的角色,常用于缓存、消息队列、会话管理等场景。为了满足不同的业务需求,特别是对高可用和可扩展性的要求,Redis 提供了多种部署模式:主从复制(Master-Slave)、哨兵(Sentinel)和集群(Cluster)。本文旨在详细介绍如何在离线环境中,逐步搭建这三种模式的 Redis 服务。 环境准备与要求在开始之前,请确保满足以下基本条件: 操作系统: 本文以 CentOS 为例,其他 Linux 发行版类似。 GCC 编译器: Redis 源码安装需要 GCC 编译器。 在线安装: yum install -y gcc 离线安装: 参考 CentOS离线安装gcc 或准备相应的离线 rpm 包。 Redis 源码包: 下载所需的 Redis 版本(本文以 7.0.12 为例)。 下载地址: https://github.com/redis/redis/archive/7.0.12.tar.gz 或从 Redis 官网 下载稳定版。 将下载好的 redis-7.0.12.tar.gz...
Java8中更优雅的记录代码运行时间
发表于2023-04-20|java|java
在日常后端开发中,性能优化是一项核心任务。我们经常需要测量某段代码的执行耗时,例如查询耗时、接口响应时间、批处理任务处理时间等。在 Java 中,传统的做法可能是使用 System.currentTimeMillis(): 1234long start = System.currentTimeMillis();// 业务逻辑long end = System.currentTimeMillis();System.out.println("执行耗时: " + (end - start) + "ms"); 虽然这非常直接,但在 Java 8 引入 java.time 包之后,我们可以使用更现代、更语义化的方式 —— Instant 和 Duration 来实现这一目标。 本文将带你深入了解 Java 8 中几种记录代码运行时间的优雅方式,并附上实用工具类与建议,提高你的代码可读性与复用性。 Java 8 简单实现方式Java 8 中的 java.time.Instant 表示一个时间点,Duration...
1…20212223
avatar
李博帅
文章
224
标签
10
分类
10
Follow Me
公告
记录自己的学习成长
最新文章
Debian 13 安装 Docker 与最佳配置2026-01-27
Java并发-为什么要区分不同线程池而不使用统一的大线程池2026-01-26
Java并发-彻底搞懂 CompletableFuture 的线程切换规则2026-01-26
Debian 13 开发环境系统优化指南2026-01-23
Flink1.18.1本地idea源码调试环境搭建2026-01-23
分类
  • java51
  • 前端1
  • 大数据24
  • 容器化43
  • 杂货小铺18
  • 环境搭建15
  • 监控预警7
  • 算法8
标签
容器化 杂货小铺 java 监控预警 大数据 前端 计科基础 算法 运维手册 环境搭建
归档
  • 一月 2026 14
  • 十二月 2025 3
  • 十一月 2025 10
  • 十月 2025 1
  • 八月 2025 16
  • 七月 2025 19
  • 六月 2025 22
  • 五月 2025 11
网站信息
文章数目 :
224
运行时间 :
本站总字数 :
388.6k
最后更新时间 :
©2022 - 2026 By 李博帅
框架 Hexo 7.3.0|主题 Butterfly 5.3.5

豫ICP备2025118913号

搜索
数据加载中