MY Blog

Thinking will not overcome fear but action will.

YUM下载RPM软件包（全量依赖、当前环境依赖、单独包）

YUM

YUM下载RPM软件包（全量依赖、当前环境依赖、单独包） 第一种【全量依赖包，推荐】： yum -y install yum-utils # 安装yum-utils repotrack docker-ce # 下载 docker-ce 全量依赖包 第二种【已安装的软件无法下载，解析当前环境依赖关系】： yum -y install --downloadonly --downlo...

Posted by zhmingyong on August 15, 2024

Docker支持多平台镜像构建

buildx

Docker安装 Centos7.9为例 yum源更新 更新为阿里云yum源 wget -O /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo wget -O /etc/yum.repos.d/epel.repo https://mirrors.aliyun.com/...

Posted by zhmingyong on August 6, 2024

Hadoop3各组件常用端口

Hadoop3组件端口

hadoop3 对外端口 hadoop端口汇总 Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。 这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooKeeper: 组件节点默认端口配置用途说...

Posted by zhmingyong on August 2, 2024

Kafka connect使用

数据汇集

Kafka Connect 介绍 Kafka Connect 是一个用于在 Apache Kafka® 和其他数据系统之间可扩展且可靠地流式传输数据的工具。通过将数据移入和移出 Kafka 进行标准化，使得快速定义连接器以在 Kafka 中传输大型数据集变得简单，可以更轻松地构建大规模的实时数据管道。 Kafka 连接器通常用来构建 data pipeline，一般有两种使用场景： ...

Posted by zhmingyong on July 11, 2024

ollama本地部署千问大模型

体验本地大模型

ollama本地部署千问大模型 作为一个程序员，应该紧跟技术的发展，才不会被淘汰，我们在通过大模型帮助我们解决问题的同时，也应该更近距离的去接触大模型，安装测试一些开源大模型，这样才能更深刻的理解大模型。 借此阿里通义千问Qwen2大模型今天开源之际，我们本地部署测试一把，通义千问开源大模型主要有以下优势： 模型在同尺寸模型的测评中，都获得了超越所有开源模型的成绩； ...

Posted by zhmingyong on June 28, 2024

Docker无用镜像清理

node镜像清理

Docker无用镜像清理 熟悉Docker的朋友可能经常遇到”none”镜像的困扰。这些会占据大量的存储空间，而除了复杂地手动处理，许多人并不明白如何有效地清理他们。 如果你正面临这样的挑战，以下的步骤教程会指导你如何在Docker中清理”none”镜像，迅速拿回你的宝贵存储空间。 首先，什么是”none”镜像呢？ 这些实际上是无主的Docker镜像。这意味着在构建新的Docker镜像时...

Posted by zhmingyong on June 26, 2024

Helm-离线安装资源准备

Helm-离线安装资源准备

Kubernetes Helm离线安装资源准备 搬运镜像 搬运镜像指的就是将镜像从公网下载到本地，然后上传至你的私有镜像仓库的过程。为了搬运镜像，你需要一台能顺利访问外网的工作机，以及能够与之传输文件的集群内操作节点（具备 kubectl 管理员权限）。 准备资源 1.对于 Helm 安装方式（对于生产集群，这无疑是更为推荐的安装方式），可以直接用下方命令获取需要搬运的镜像列表： ...

Posted by zhmingyong on June 24, 2024

Nginx-安全加固/安全基线

Nginx-安全加固

Nginx-安全加固/安全基线 01 使用安全的版本 版本最新：1.25.4    更新日期：2024-03 建议使用稳定版本 1.24.0，低版本不建议使用 NginX 下载地址： https://nginx.org/en/download.html 02 使用普通用户启动 不使用管理员组的用户启动 03 隐藏NginX版本号 在nginx.conf配置文件中，h...

Posted by zhmingyong on April 19, 2024

CentOS7.X-安全加固/安全基线

CentOS7.X-安全加固

CentOS7.X-安全加固/安全基线 本期以CentOS7.X, 7版本和6版本安全基线大同小异,主要关注日志审计规则配置文件目录及防火墙配置,加固前请对系统业务运行的服务、端口等信息进行摸查及评估，并在测试机先行测试，加固不规范，老板扔炸弹。 01 设置口令最长使用天数 /etc/login.defs中PASS_MAX_DAYS 不小于标准值90 02 设置口令更改最小间隔天数...

Posted by zhmingyong on April 19, 2024

SpringBoot+Docker高效容器化的最佳实践

高效容器化的最佳实践

SpringBoot+Docker：高效容器化的最佳实践 首先为什么要使用Docker？ Docker是一个强大的工具，它允许开发者将他们的应用程序打包到容器中，以便可以在任何平台上轻松部署和运行。当涉及到对 Spring Boot 应用程序进行 Docker 化时，每个开发人员都应该遵循一些最佳实践，以确保应用程序平稳高效地运行。 在本文中，我们将探讨这些最佳实践，并提供代码示例和说...

Posted by zhmingyong on April 17, 2024

FEATURED TAGS
Linux 缓存清除 定时清除 Mac Hadoop 集群 扩容 缩容 Trino Hudi 大数据 数据湖 Docker SpringBoot 安全基线 安全加固
ABOUT ME

Goals determine what you going to be!

✉️ zhmingyong@gmail.com

FRIENDS