晨曦's Blog

利用Kubeadm创建Kubernetes集群之Centos，你会了吗？

发表于 2019-01-21 | 更新于 2019-01-22 | 分类于技术渣 | 评论数： | 阅读次数：

前记

Kubeadm是一个工具，通过提供kubeadm init和kubeadm join来作为创建Kubernetes集群的最佳实践“快速路径”

简单理解就跟Docker swarm差不多吧，Kubeadm的GA版本都已经发布了，那还等什么呢？

部署

资源版本

CentOS 7.6 64
Kubernetes version: v1.13.2
Docker version 18.06

这里为什么使用Docker 18.06是因为kubeadm now properly recognizes Docker 18.09.0 and newer, but still treats 18.06 as the default supported version.

所以我们默认还是使用18.06

服务器

这里我们使用CentOS 7.6 64，同时测试环境为阿里云服务器

IP Address	Hostname	CPU	Memory
172.16.1.86	Master	2C	4G
172.16.1.87	Node1	2C	4G
172.16.1.88	Node2	2C	4G

这里注意一下服务器系统，目前官方已支持Ubuntu 16.04+、Debian 9、CentOS 7、RHEL 7等

配置

关闭防火墙

1
2
3

setenforce 0
sed -i 's/^SELINUX=enforcing$/SELINUX=permissive/' /etc/selinux/config
systemctl stop firewalld && systemctl disable firewalld

设定/etc/hosts

1
2
3

172.16.1.86 Master
172.16.1.87 Node1
172.16.1.88 Node2

禁用Swap

1	swapoff -a && sysctl -w vm.swappiness=0

将配置中net.bridge.bridge-nf-call-iptables被设为1

cat <<EOF >  /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
EOF

安装Docker

在3台服务器上都安装上Docker，此次实验Docker版本：Docker version 18.06

Centos Docker 安装文档

安装完成启动Docker

1	systemctl enable docker.service

安装K8s

在3台服务器上配置YUM源为阿里镜像源

cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF

您需要在每台机器上都安装以下的软件包：

kubeadm: 用来初始化集群的指令。
kubelet: 在集群中的每个节点上用来启动pod和container等。
kubectl: 用来与集群通信的命令行工具。

1 2	yum install -y kubelet kubeadm kubectl --disableexcludes=kubernetes systemctl enable kubelet && systemctl start kubelet

版本：Kubernetes version: v1.13.2

Master

在Master节点上配置kubelet所需的cgroup驱动

1
2
3

cat <<EOF >  /var/lib/kubelet/kubeadm-flags.env
KUBELET_EXTRA_ARGS=--cgroup-driver=cgroupfs
EOF

需要重启kubelet：

1 2	systemctl daemon-reload systemctl restart kubelet

k8s.gcr.io镜像本地化

kubeadm config images list //查看所需要的镜像

// 编辑脚本从hub获取镜像
vim k8s.sh

#!/bin/bash
docker pull coredns/coredns:1.2.6
docker tag coredns/coredns:1.2.6 k8s.gcr.io/coredns:1.2.6
docker rmi coredns/coredns:1.2.6
images=(
    kube-apiserver:v1.13.2
    kube-controller-manager:v1.13.2
    kube-scheduler:v1.13.2
    kube-proxy:v1.13.2
    pause:3.1
    etcd:3.2.24
)
for imageName in ${images[@]} ; do
  docker pull mirrorgooglecontainers/$imageName
  docker tag mirrorgooglecontainers/$imageName k8s.gcr.io/$imageName
  docker rmi mirrorgooglecontainers/$imageName
done

// 编辑脚本权限
chmod +x k8s.sh

// 执行脚本
./k8s.sh

初始化Master

1	kubeadm init --kubernetes-version=v1.13.2 --pod-network-cidr=10.244.0.0/16

配置kubectl认证信息

# 非root用户
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

# root用户
export KUBECONFIG=/etc/kubernetes/admin.conf
echo "export KUBECONFIG=/etc/kubernetes/admin.conf" >> ~/.bash_profile

安装网络插件flannel

1	kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

Node

Node镜像本地化

// 编辑脚本从hub获取镜像
vim k8s.sh

#!/bin/bash
images=(
    kube-proxy:v1.13.2
    pause:3.1
)
for imageName in ${images[@]} ; do
  docker pull mirrorgooglecontainers/$imageName
  docker tag mirrorgooglecontainers/$imageName k8s.gcr.io/$imageName
  docker rmi mirrorgooglecontainers/$imageName
done

// 编辑脚本权限
chmod +x k8s.sh

// 执行脚本
./k8s.sh

将节点加入集群

1	kubeadm join 172.16.1.86:6443 --token xxx --discovery-token-ca-cert-hash xxx

Dashboard

未完待续…

题外话：

安装过程中可以用tail -f 100 /var/log/messages查看日志，便于找到问题所在

pip之No module named 'pip._internal'

发表于 2019-01-15 | 更新于 2019-01-21 | 分类于技术渣 | 评论数： | 阅读次数：

前记

说说本地环境Deepin 15.8，Python2与Python3共存

问题

问题如下：

$ pip3
Traceback (most recent call last):
  File "/usr/local/bin/pip3", line 7, in <module>
    from pip._internal import main
ModuleNotFoundError: No module named 'pip._internal'

$ pip
Traceback (most recent call last):
  File "/usr/local/bin/pip", line 7, in <module>
    from pip._internal import main
ModuleNotFoundError: No module named 'pip._internal'

如pip与pip3均不可使用

解决

$ sudo easy_install pip
Searching for pip
Best match: pip 10.0.1
Adding pip 10.0.1 to easy-install.pth file
Installing pip script to /usr/local/bin
Installing pip3.6 script to /usr/local/bin
Installing pip3 script to /usr/local/bin

Using /usr/local/lib/python2.7/dist-packages
Processing dependencies for pip
Finished processing dependencies for pip

完美解决

通过Gitlab打包Java-Spring Cloud部署K8s部分备忘

发表于 2019-01-05 | 分类于技术渣 | 评论数： | 阅读次数：

公共包的处理

解决方案是将公共包打包在runner服务器上，其他模块打包时自动应用公共包.gitlab-ci.yml如下：

stages:
  - deploy
maven-build:
  stage: deploy
  script: 
    - mvn install

注册中心地址

Eureka地址应为http://[service name]:[port]/eureka

切记http协议

未完待续

Mac常用软件备份

发表于 2019-01-05 | 分类于资源控 | 评论数： | 阅读次数：

microsoft remote desktop for mac

根据【官方文档】所示，两种方式获取

Mac应用应用商店下载(只支持美区)
Mac beta版，通过【HockeyApp】下载

未完待续

分布式事务LCN和GTS比较and你更喜欢谁？

发表于 2018-12-22 | 分类于技术渣 | 评论数： | 阅读次数：

LCN简介

LCN分布式事务框架的核心功能是对本地事务的协调控制，框架本身并不创建事务，只是对本地事务做协调控制
因此该框架与其他第三方的框架兼容性强，支持所有的关系型数据库事务，支持多数据源，支持与第三方数据库框架一块使用
在使用框架的时候只需要添加分布式事务的注解即可，对业务的侵入性低

LCN核心步骤

创建事务组，是指在事务发起方开始执行业务代码之前先调用TxManager创建事务组对象，然后拿到事务标示GroupId的过程
添加事务组，添加事务组是指参与方在执行完业务方法以后，将该模块的事务信息添加通知给TxManager的操作
关闭事务组，是指在发起方执行完业务代码以后，将发起方执行结果状态通知给TxManager的动作。当执行完关闭事务组的方法以后，TxManager将根据事务组信息来通知相应的参与模块提交或回滚事务

LCN事务控制原理

LCN事务控制原理是由事务模块TxClient下的代理连接池与TxManager的协调配合完成的事务协调控制TxClient的代理连接池实现了javax.sql.DataSource接口，并重写了close方法，事务模块在提交关闭以后TxClient连接池将执行”假关闭”操作，等待TxManager协调完成事务以后在关闭连接

阿里云GTS全局事务服务

全局事务服务（Global Transaction Service，简称 GTS）是一款高性能、高可靠、接入简单的分布式事务中间件，用于解决分布式环境下的事务一致性问题
GTS 支持 DRDS、RDS、MySQL 等多种数据源，可以配合EDAS 和 SpringCloud 等微服务框架使用，兼容 MQ 实现事务消息。通过各种组合，可以轻松实现分布式数据库事务、多库事务、消息事务、服务链路级事务等多种业务需求

GTS模拟场景演示

性能

GTS 通过大量创新，解决了事务 ACID 特性与高性能、高可用、低侵入不可兼得的问题。单事务分支的平均响应时间在 2ms 左右，3 台服务器组成的集群可以支撑 3 万 TPS 以上的分布式事务请求

LCN性能参考：http://springcloud.cn/view/374在众多开源分布式事务框架中，LCN性能是处于前列的

LCN总结

优点:

性能优秀
可靠性强
LCN实现的分布式事务处理模式，编码复杂性和入侵代码量低

缺点:

需额外部署tx-manager服务节点
由于需要lock资源这种处理方式，如果集中更新某几个热门商品时，LCN的性能衰减量大于TCC模式
服务超时时，会造成其他服务的资源被锁住，比如支付服务超时过程中，相关商品库存会一直无法操作
不支持SpringCloud 2.0.0及以上版本（目前已通过修改源码实现支持）

GTS总结

优点:

性能优秀(有淘宝双十一作为示例）
可靠性强
代码入侵性小（相比LCN多一点）
支持SpringCloud 2.0.0及以上版本

缺点:

无法在本地进行测试
只能在阿里云内网使用，或者购买专有云