55浏览

0评论

kubernetes中的namespace、node、pod介绍

namepace、node、pod？当我们讨论 k8s 时总是会讨论集群，k8s 中的每个集群由多个机器/虚拟机组成，集群也被称为 命名空间(namespace)，命名空间是虚拟的，因此也叫虚拟集群。Namespa...

• 2023-01-06

44浏览

0评论

Apache Hudi结合Flink的亿级数据入湖实践解析

目录1. 实时数据落地需求演进2. 基于Spark+Hudi的实时数据落地应用实践3. 基于Flink自定义实时数据落地实践4. 基于Flink + Hudi的落地数据实践5. 后续应用规划及展望5.1 取...

• 2023-01-06

75浏览

0评论

Docker向数据卷Volume写入数据

一、前言我们知道，镜像是只读的，容器是在镜像的基础上加了一层读写层，这样容器就可以写了。既然容器可以进行写入了，那么我们就可以把一些数据放进容器里面。但是这样会有一种问...

• 2023-01-06

57浏览

0评论

Docker容器下运行Nginx并实现反向代理

目录一、前言二、运行Nginx容器1、获取Nginx镜像2、运行Nginx容器三、运行ASP.NET Core应用程序1、构建ASP.NET Core应用程序镜像2、运行应用容器三、设置反向代理一、前言...

• 2023-01-06

50浏览

0评论

关于k8s 使用 Service 控制器对外暴露服务的问题

目录部署 deploy部署 service查看 service 和 pod 的关系查看 service查看端口导出 yaml筛选 service 关联 pod扩容测试Service 三种常用类型Service 引入主要是解决 Pod 的...

• 2023-01-06

48浏览

0评论

Apache Hudi性能提升三倍的查询优化

目录1. 背景2. 设置3. 测试4. 结果5. 总结从 Hudi 0.10.0版本开始，我们很高兴推出在数据库领域中称为 Z-Order 和 Hilbert 空间填充曲线的高级数据布局优化技术的支持。1. 背...

• 2023-01-06

165浏览

0评论

解决Docker容器下不能使用vim命令的问题

在使用docker容器时，有时候里边没有安装vim，敲vim命令时提示说：vim: command not found，如图所示：这时候就需要安装vim。可是当你敲apt-get install vim命令时，提示： Readin...

• 2023-01-06

62浏览

0评论

关于nginx 反向代理 URL替换方案

目录1.直接替换location 匹配部分2.使用nginx 的rewrite 模块 rewrite 企业应用场景nginx 提供反向代理服务，日常开发过程中有时候我们需要使用nginx 作为代理服务根据url的...

• 2023-01-06

60浏览

0评论

Docker部署项目完全使用指南(小结)

目录环境准备Docker安装启动Java环境安装Docker远程访问配置Docker重启IDEA配置Docker项目配置配置Dockerfile文件Docker配置Maven打包生成Docker镜像总结Linux操作命令Dock...

• 2023-01-06

85浏览

0评论

docker安装nginx并配置ssl的方法步骤

最近想在吃灰了一年多的服务器上，安装一下docker，结果始终找不到合适的yum源，后来经过一番百度才知道，原来centos8要凉了，所以好多镜像站都移除了CentOS 8的源。没办法，短暂的思考...

• 2023-01-06

81浏览

0评论

详解Docker Compose配置文件参数

目录1. image2. build3. command4.container_name5.depends_on6.dns7. tmpfs8. entrypoint9.env_file10. environment11. expose12. external_links13. extra_hosts14. labe...

• 2023-01-06

46浏览

0评论

docker基本命令及使用实例详解

目录docker基本命令docker文件系统commit镜像容器数据卷具名和匿名挂载初识Dockerfile commitDockerfile 构建过程发布自己的镜像docker网络docker基本命令docker文件系统do...

• 2023-01-06

131浏览

0评论

使用kubeadm命令行工具创建kubernetes集群

目录命令行工具通过软件仓库安装二进制文件下载安装ubutu & centos 快速安装创建 kubernetes 集群1，创建 Master2，然后初始化集群网络。3，加入集群清除环境命令行工具主要有三...

• 2023-01-06

40浏览

0评论

关于docker启动jenkins环境的问题

【注意：】jenkins的docker镜像，需要从官网进入直接获取，其他地方获取到的docker镜像，可能因为Jenkins版本过低，导致后续插件安装失败等问题!!!jenkins基本工作原理1.拉取镜像需要...

• 2023-01-06

59浏览

0评论

Docker 文件系统-AUFS 原理介绍

目录什么是联合文件系统如何配置 Docker 的 AUFS 模式AUFS 工作原理AUFS 是如何存储文件的？AUFS 是如何工作的？1. 读取文件修改文件或目录AUFS 演示准备演示目录和文件创建 AU...

• 2023-01-06

41浏览

0评论

Docker镜像构建之docker commit的使用

目录1、创建容器2、拷贝资源3、安装资源4、构建镜像5、使用构建的镜像创建容器我们可以通过公共仓库拉取镜像使用，但是，有些时候公共仓库拉取的镜像并不符合我们的需求。尽管...

• 2023-01-06

46浏览

0评论

Z-Order加速Hudi大规模数据集方案分析

目录1. 背景2. Z-Order介绍3. 具体实现3.1 z-value的生成和排序3.1.1 基于映射策略的z值生成方法3.1.2 基于RangeBounds的z-value生成策略3.2 与Hudi结合3.2.1 表数据的Z排...

• 2023-01-06

40浏览

0评论

关于docker registry使用详解

docker registry 是docker image的仓库，运行pull,push,search命令时，这些命令是通过docker daemon与docker registry 通信。我们可以创建本地的docker hub仓库，将下载下来的ima...

• 2023-01-06

70浏览

0评论

Apache Hudi基于华米科技应用湖仓一体化改造

目录1. 应用背景及痛点介绍2. 技术方案选型3. 问题与解决方案3.1.增量数据字段对齐问题3.2 全球存储兼容性问题3.3 云主机时区统一问题3.4 升级新版本问题3.5 多分区Upsert...

• 2023-01-06

166浏览

0评论

VMware vCenter6.7添加ESXI主机的教程图解

目录一、vSphere、vCenter、ESXI三者关系二、添加主机VMware vCenter6.7添加ESXI主机一、vSphere、vCenter、ESXI三者关系　　vSphere包括vCenter和ESXI，ESXI通过VCENTER来管...

• 2023-01-06

58浏览

0评论

docker搭建mongodb单节点副本集的实现

目录背景启动步骤可能遇到的问题解决办法背景在开发中，我们很容易通过docker启动一个普通的mongodb数据库服务。但是有时候为了保持与线上环境一致，或者为了利用mongodb副本集...

• 2023-01-06

74浏览

0评论

ELK收集Nginx日志的项目实战

目录01 安装 Nginx 和 ab 工具1.1 安装 nginx1.2 启动 Nginx 并测试02 使用 Filebeat 采集日志并展示2.1 配置 filebeat 采集 Nginx 日志2.2 使用 Kibana 展示 Nginx 日志数...

• 2023-01-06

51浏览

0评论

Docker Push Skipped foreign layer 的错误问题及解决方案

目录引言错误实例错误原因解决方法引言当Docker推送基于Windows镜像到私有仓库的时候会遇到Skipped foreign layer的问题。错误实例docker push 192.168.2.30:5000/iisThe p...

• 2023-01-06

54浏览

0评论

教你docker方式部署nacos

目录docker方式部署nacos1 拉取nacos镜像并启动2 启动nacos命令3 修改配置文件4 退出容器5 重启容器docker方式部署nacos1 拉取nacos镜像并启动docker pull nacos/nacos-ser...

• 2023-01-06

105浏览

0评论

如何批量删除Docker中已经停止的容器的几种方法

目录方法一：方法二： 方法三：方法四：附图：方法一：#显示所有的容器，过滤出Exited状态的容器，取出这些容器的ID，sudo docker ps -a|grep Exited|awk '{print $1}'#查询所有的容器，过滤出E...

• 2023-01-06

126浏览

0评论

关于为Windows Service 2019 使用 Docker的问题

目录引言准备工作开始安装安装Hyper-V安装容器安装Docker安装docker-compose切换内核(此方法有问题)更新Docker卸载Docker准备你的系统以删除 Docker正式卸载清理 Docker 数...

• 2023-01-06

73浏览

0评论

portainer连接远程docker的实现示例

目录安装 portainer启动 protainer访问 protainer配置远程docker安装 portainer> docker pull portainer/portainer启动 protainer>docker run -d --name portainerUI -p 90...

• 2023-01-06

174浏览

0评论

使用docker安装部署NextCloud私人网盘的方法步骤

目录1、查询并下载NextCloud镜像2、创建并启动NextCloud容器3、访问NextCloudWEB界面4、参考链接1、查询并下载NextCloud镜像执行命令docker search nextclouddocker pull n...

• 2023-01-06

73浏览

0评论

Docker-swarm快速搭建redis集群的方法步骤

目录环境配置修改hostname创建目录创建网络编写compose.yml模版文件启动服务验证测试集群集群测试验证环境配置1.三台虚拟机，VM16操作系统IP备注centos7192.168.2.131 centos...

• 2023-01-06

99浏览

0评论

利用drone ci自动化部署静态博客的完整步骤

目录前言准备安装drone ci1、docker-compose配置文件2、docker-compose配置文件主要参数详解drone serverDRONE_SERVER_PROTO和DRONE_SERVER_HOSTDRONE_RPC_SECRETDRONE_USE...

• 2023-01-06

50浏览

0评论

Docker安装RabbitMQ并安装延时队列插件

目录一、RabbitMQ简介二、docker安装RabbitMQ1、搜索镜像2、拉取并运行容器3、访问 http://192.168.50.128:15672 三、安装RabbitMQ延时队列插件（delayed_message_exchange）一...

• 2023-01-06

54浏览

0评论

docker搭建kafka集群的方法实现

目录一、原生Docker命令二、镜像选择三、集群规划四、Zookeeper集群安装五、Kafka集群安装一、原生Docker命令1. 删除所有dangling数据卷（即无用的Volume，僵尸文件）docker volu...

• 2023-01-06

69浏览

0评论

Apache SeaTunnel实现 非CDC数据抽取实践记录

目录01 SeaTunnel简介1. Apache SeaTunnel整体介绍2. Apache SeaTunnel技术特性3. Apache SeaTunnel工作流程4. Apache SeaTunnel环境依赖5. Apache SeaTunnel用户使用情况0...

• 2023-01-06

141浏览

0评论

使用非root用户安装及启动docker的问题(rootless模式运行)

目录一、容器用户与宿主机用户映射二、在非root用户下运行docker守护进程2.1.docker版本要求2.2. 前置条件2.3.开始rootless模式安装2.4.启动守护进程运行容器三、存在若干...

• 2023-01-06

69浏览

0评论

.NET 6 从0到1使用Docker部署至Linux环境超详细教程

目录前言环境准备.NET Core项目准备1.首先我们先创建一个空的ASP.NET Core Web应用2.我们可以先在本地将项目构建成镜像看看效果3.接下来我们将镜像run起来，构造出一个容器：Li...

• 2023-01-06

49浏览

0评论

Docker-Compose搭建Spark集群的实现方法

目录一、前言二、docker-compose.yml三、启动集群四、结合hdfs使用一、前言在前文中，我们使用Docker-Compose完成了hdfs集群的构建。本文将继续使用Docker-Compose，实现Spark...

• 2023-01-06

43浏览

0评论

Docker容器数据卷技术介绍

目录Docker容器数据卷技术介绍一、卷技术介绍二、使用数据卷Docker容器数据卷技术介绍一、卷技术介绍现在我们知道docker的理念就是把应用和环境打包成镜像，方便我们去运行容...

• 2023-01-06

60浏览

0评论

VMware虚拟机的三种网络模式（桥接模式Bridged、地址转换模式NAT、仅主机模式Host-Only）详解

目录一、Bridged（桥接模式）1、什么是桥接模式？2、如何设置桥接模式。3、测试4、总结二、NAT（地址转换模式）1、什么是NAT模式？2、如何设置NAT模式。3、测试4、小结：5、总结三、Host-...

• 2023-01-06

78浏览

0评论

详解docker进行数据挂载的三种模式

目录一、Tmpfs挂载二、Bind mounts三、Bind mounts-测试是否正确挂载数据卷四、Bind mounts-验证只读挂载Docker 提供了三种方式将数据从宿主机挂载到 Docker容器中: volume...

• 2023-01-06

51浏览

0评论

使用docker创建和运行跨平台的容器化mssql数据库

目录1.开启虚拟化服务2.安装Docker desktop3.部署本地mssql数据库3.另外也能在Docker Desktop-Container查看刚刚创建的容器4.使用VS验证我们一般启用sql server数据库要么...

• 2023-01-06

45浏览

0评论

基于云服务MRS构建DolphinScheduler2调度系统的案例详解

目录为什么写这篇文章？环境准备安装MRS 客户端安装MySQL服务1. 创建ECS用户2.解压安装包3. 配置文件初始化4. 启动数据库5.登陆，修改密码，预置dolphinscheduler的用户安装dolph...

• 2023-01-06

44浏览

0评论

聊聊docker跨主机之间容器通信问题

目录一、环境信息二、具体实践1.在testa主机上创建docker桥接网络2.在testb主机上创建docker桥接网络3.在testa主机中你自定义的网段选取任意IP地址作为你要启动容器IPtestb...

• 2023-01-06

46浏览

0评论

Docker容器的加载分层原理及commit镜像

目录Docker容器的加载原理、分层原理、commit镜像一、什么是镜像二、docker镜像加载原理1. 联合文件系统UnionFS2. 镜像加载原理三、分层原理四、commit镜像Docker容器的加...

• 2023-01-06

132浏览

0评论

VMware克隆虚拟机后修改UUID、MAC地址、IP和主机名 静态ip设置方法

1、首先选中需要克隆的虚拟机，右键点击管理-->克隆，注意关闭虚拟机2、修改MAC地址，一般克隆完成后，虚拟机的网卡MAC地址会自动改变的，如果没有自动改变，可以手动修改。选中虚拟机，...

• 2023-01-06

33浏览

0评论

Docker容器实战之镜像与容器的工作原理

目录一. bootfs和rootfs二. 镜像结构三. 容器层四. 联合文件系统​一. bootfs和rootfs通常而言，Linux的操作系统由两类文件系统组成：bootfs（boot file system）和rootfs（root file...

• 2023-01-06

42浏览

0评论

docker compose快速开始超详细教程

目录docker compose快速开始一、什么是docker compose1. Compose 特性在单独的主机上提供多个相互隔离的环境在创建容器时，自动保存 volume 数据只重建有改动的容器可以使用...

• 2023-01-06

83浏览

0评论

docker 安装Oracle-12C的方法详解

docker search Oracledocker pull truevoly/oracle-12cdocker images挂载目录 mkdir -p /data/oracle/data_temp && chmod 777 /data/oracle/data_temp运行docker run --res...

• 2023-01-06

56浏览

0评论

docker搭建Zookeeper集群的方法步骤

目录0.前言1.前提2.开始搭建解释创建zoo.cfg3.docker搭建1.docker创建网络2.启动第1个zk节点3.启动第2个zk节点4.启动第3个zk节点4.访问节点1.进入zk第一个节点的docker容器...

• 2023-01-06

46浏览

0评论

kubernetes k8s CRD自定义资源学习笔记

目录CustomResourceDefinition简介：目前扩展Kubernetes API的常用方式有3种:配置规范示例1: 创建自定义CRD创造自定义CRD类型示例2: etcd Operator 部署 (该项目已不在维护)...

• 2023-01-06

47浏览

0评论

使用Docker将容器目录挂载到主机上的实现方法

目录一、基本介绍二、将容器目录挂载到主机一、基本介绍这里我们主要介绍 Docker 里的一个命令，叫做 --mount，其本质上来说和 --volume 命令并没有太大区别，因为这两个命令都是...

• 2023-01-06