1. cadvisor监控 利用谷歌的cadvisor，目前只能监控docker下的容器 1234567 docker pull hub.c.163.com/xbingo/cadvisor:latestdocker run \-v /var/run:/var/run \-v /sys:/sys:ro \-v /var/lib/docker:/var/lib/docker:ro \-d -p 8080:8080 --name=mon \hub.c.163.com/xbingo/cadvisor:latest 2. scope监控 123456[root@control ~]# ./scope launch6766fe71c2edc2977631a9b419f640d974f590af52ffd8b15581672e1193c896Scope probe startedWeave Scope is listening at the following URL(s): * http://192.168.10.10:4040/ * http://10.4.0.1:4040/

1. 了解Cgroup cgroups的全称是Linux Control Groups，主要作用是限制、记录和隔离进程组（process groups）使用的物理资源（cpu、memory、IO等） Cgroup提供了一个原生接口并通过cgroupfs提供（cgroupfs就是Cgroup的一个借口封装）。类似于procfs和sysfs，是一种虚拟文件系统。并且cgroupfs是可以挂载的，默认情况下挂载在/sys/fs/cgroup目录。 Systemd也是对于Cgroup接口的一个封装。systemd以PID1的形式在系统启动的时候运行，并提供了一套系统管理守护程序、库和实用程序，用来控制、管理Linux计算机操作系统资源。通过systemd-cgls命令我们可以看到systemd工作的进程PID是1，而目录/sys/cgroup/systemd/是systemd维护的自己使用的非subsystem的cgroups层级结构。 2. 对容器内存的限制 运行一个容器,不限制的情况下压测 1nerdctl run -d --name=c1 --restart=always centos ...

1. Go官方工具链 目前，Go官方工具链中提供的工具是使用的最广泛的Go开发工具。本文将介绍如何配置Go开发环境和如何使用Go官方工具链中提供的go命令。一些非官方工具链中的工具也将简单提及。 2. 安装Go官方工具链 请从国际官网或者国内官网下载Go官方工具链，并按照下载页面中的说明安装Go官方工具链。 Go官方工具链的版本和其所支持的最高Go语言版本是一致的。比如，Go官方工具链1.18.x版本支持从1.0到1.18的所有Go语言版本。 为了从任意目录运行Go官方工具链中工具命令（通过go命令），Go官方工具链安装目录下bin子目录路径必须配置再PATH环境变量中。当使用安装程序安装Go官方工具链时，安装程序很可能已经自动的将此配置好了。 Go官方工具链近来的版本均支持一个称为Go模块（Go modules）的特性，用来管理项目依赖。此特性在版本1.11中被实验性的引入并从版本1.16开始默认支持。 我们应该了解一个环境变量：GOPATH 此环境变量的默认值为当前用户的HOME目录下的名为go文件对应的目录路径。GOPATH环境变量可以被手动的配置多个路径。以后，当GOPATH文 ...

1. 安装docker-compose 1[root@harbor ~]# yum install docker-compose -y 2. 配置docker允许http访问 12345678910111213141516[root@harbor ~]# cat /etc/docker/daemon.json{ "log-driver": "json-file", "log-opts": { "max-size": "100m", "max-file": "3" }, "max-concurrent-downloads": 10, "max-concurrent-uploads": 10, "registry-mirrors": ["https://7bezldxe.mirror.aliyuncs.co ...

1. 概述 nerdctl想要构建镜像需要安装buildkit插件，且不能基于本地镜像进行构建，所以建议构建镜像和镜像仓库仍使用docker作为运行时。 2. 安装docker-ce 123[root@localhost ~]# rm -rf /etc/yum.repos.d/* && wget ftp://ftp.rhce.cc/k8s/* -P /etc/yum.repos.d/[root@harbor ~]# yum install docker-ce -y[root@harbor ~]# systemctl enable docker --now 3. 添加配置文件 123456789101112131415[root@harbor ~]# cat /etc/docker/daemon.json{ "log-driver": "json-file", "log-opts": { "max-size": "100m", & ...

1. 安装 配置yum源安装 123wget ftp://ftp.rhce.cc/k8s/* -P /etc/yum.repos.d/yum install containerd.io cri-tools -y 生成默认配置文件 1containerd config default > /etc/containerd/config.toml 修改配置文件 12345678 [plugins."io.containerd.grpc.v1.cri".registry.mirrors] [plugins."io.containerd.grpc.v1.cri".registry.mirrors."docker.io"] endpoint = ["https://frz7i079.mirror.aliyuncs.com"]sandbox_image = "registry.aliyuncs.com/google_containers/pause:3.7"[plugins."io. ...

1. 容器概念介绍 对于初学者来说并不太容易理解什么是容器，这里举个例子。想象一下，我们把系统安装在一个U盘里，此系统安装好了MySQL。然后我们把这个U盘插入到一台正在运行的宿主机上，这台宿主机上并没有安装MySQL，如图1-1所示。 图1-1 了解容器和镜像 然后把U盘里的mysqld进程“拽”到物理机上运行。但是这个mysqld进程只能适应U盘里的生态环境（系统环境），并不能适应物理机的生态环境（系统）。所以找一个类似于气球的东西把mysqld包裹保护起来，这个mysqld进程就可以正常运行了，因为它感觉现在所处的生态环境，仍然是U盘里的生态环境。 但是这个进程mysqld运行的时候是需要消耗CPU和内存的，这个U盘里并不提供CPU和内存，所以气球里的mysqld进程可以从物理机里吸收CPU和内存，作为维持它正常运行的“养分”。 那么这个类似气球的东西就是容器，U盘就是镜像。在Linux下安装软件包的时候经常会遇到各种包依赖，或者有人不会在Linux系统（比如 Ubuntu、centos）里安装软件包。这样以后就不需要安装和配mysql了，直接把这个“U盘”插到电脑上，然后生成 ...

1. 虚拟机环境准备 主机名 IP 内存 系统 hadoop101 192.168.10.11 2G Ubuntu 20.04.3 LTS hadoop102 192.168.10.12 2G Ubuntu 20.04.3 LTS hadoop103 192.168.10.13 2G Ubuntu 20.04.3 LTS 以下步骤三台服务器均需要操作 1.1 添加主机名映射 1234ren@hadoop101:~$ cat /etc/hosts192.168.10.11 hadoop101192.168.10.12 hadoop102192.168.10.13 hadoop103 1.2 ssh三机互信 1234ren@hadoop101:~$ ssh-keygenren@hadoop101:~$ ssh-copy-id ren@192.168.10.11ren@hadoop101:~$ ssh-copy-id ren@192.168.10.12ren@hadoop101:~$ ssh-copy-id ren@192.168.10.13 1.3 创建项目目 ...

1. 前言 如果你比较关注新兴技术的话，那么很可能在不同的地方听说过 istio，并且知道它和 service mesh 有着牵扯。这篇文章可以作为了解 istio 的入门介绍，了解什么是 istio，istio 为什么最近这么火，以及 istio 能够我们带来什么好处。 2. 什么是 istio？ 官方对 istio 的介绍浓缩成了一句话： An open platform to connect, secure, control and observe services. 翻译过来，就是”连接、安全加固、控制和观察服务的开放平台“。开放平台就是指它本身是开源的，服务对应的是微服务，也可以粗略地理解为单个应用。 中间的四个动词就是 istio 的主要功能，官方也各有一句话的说明。这里再阐释一下： 连接（Connect）：智能控制服务之间的调用流量，能够实现灰度升级、AB 测试和红黑部署等功能 安全加固（Secure）：自动为服务之间的调用提供认证、授权和加密 控制（Control）：应用用户定义的 policy，保证资源在消费者中公平分配 观察（Observe）：查看服务运行期间 ...

1. Hadoop是什么 Hadoop是由Apache基金会所开发的分布式系统基础架构。 主要解决，海量数据的存储和海量数据的分析计算问题。 广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 2. Hadoop发展历史 Hadoop创始人Doug Cutting，为了实现与Googole类似的全文搜索功能，他在Lucene框架基础上进行优化升级，查询引擎和索引引擎。 2001年年底Lucene成为Apache基金会的一个子项目。 对于海量数据的场景，Lucene框架面对与Google同意的困难，存储海量数据困难，检索海量数据速度慢。 学习和模仿Google解决这些问题的办法：微型版Nutch。 可以说Google是Hadoop的思想之源（Google在大数据方面的三篇论文） GFS --> HDFS Map-Reduce —> MR BigTable —> HBase 2003-2004年，Google公开了部分GFS和MapReduce思想的细节，以此为基础Doug Cutting等人用了2年业务时间实现了DFS和MapRed ...