成人午夜视频全免费观看高清-秋霞福利视频一区二区三区-国产精品久久久久电影小说-亚洲不卡区三一区三区一区

CentOS7.5使用yum安裝Kubernetes集群(二)-創(chuàng)新互聯(lián)

一、安裝方式介紹

1、yum 安裝

目前CentOS官方已經(jīng)把Kubernetes源放入到自己的默認(rèn) extras 倉(cāng)庫(kù)里面,使用 yum 安裝,好處是簡(jiǎn)單,壞處也很明顯,需要官方更新 yum 源才能獲得最新版本的軟件,而所有軟件的依賴又不能自己指定,尤其是你的操作系統(tǒng)版本如果低的話,使用 yum 源安裝的 Kubernetes 的版本也會(huì)受到限制,通常會(huì)低于官方很多版本,我安裝的時(shí)候目前官方版本為1.12,而 yum 源中的版本為1.5.2

站在用戶的角度思考問題,與客戶深入溝通,找到徐水網(wǎng)站設(shè)計(jì)與徐水網(wǎng)站推廣的解決方案,憑借多年的經(jīng)驗(yàn),讓設(shè)計(jì)與互聯(lián)網(wǎng)技術(shù)結(jié)合,創(chuàng)造個(gè)性化、用戶體驗(yàn)好的作品,建站類型包括:網(wǎng)站設(shè)計(jì)制作、網(wǎng)站建設(shè)、企業(yè)官網(wǎng)、英文網(wǎng)站、手機(jī)端網(wǎng)站、網(wǎng)站推廣、主機(jī)域名、雅安服務(wù)器托管、企業(yè)郵箱。業(yè)務(wù)覆蓋徐水地區(qū)。

2、二進(jìn)制安裝

使用二進(jìn)制文件安裝,好處是可以安裝任意版本的 Kubernetes,壞處是配置比較復(fù)雜,很多軟件包因?yàn)橐恍┰?,我們?cè)诖箨懯窃L問不到的。
請(qǐng)查看博文:https://blog.51cto.com/wzlinux/2322345

3、Kubeadm 安裝

kubeadm 是 Kubernetes 官方提供的用于快速安裝 Kubernetes 集群的工具,伴隨Kubernetes每個(gè)版本的發(fā)布都會(huì)同步更新,kubeadm會(huì)對(duì)集群配置方面的一些實(shí)踐做調(diào)整,通過實(shí)驗(yàn) kubeadm 可以學(xué)習(xí)到 Kubernetes 官方在集群配置上一些新的最佳實(shí)踐。

1.4 版本對(duì)于Linux主要發(fā)行版本Ubuntu Xenial和Red Hat centos7的用戶,可以使用熟悉的 apt-get 和 yum 來直接安裝 Kubernetes。再比如,1.4版本引入了 kubeadm 命令,將集群?jiǎn)?dòng)簡(jiǎn)化為兩條命令,不需要再使用復(fù)雜的kube-up腳本。

Kubernetes 的官方文檔更新的速度太快了,我們注意到在 Kubernetes 1.9 的文檔Using kubeadm to Create a Cluster中已經(jīng)給出了目前1.9的 kubeadm 的主要特性已經(jīng)處于beta狀態(tài)了,在2018年將進(jìn)入GA狀態(tài),說明kubeadm離可以在生產(chǎn)環(huán)境中使用的距離越來越近了,這也是我們以后注意使用的安裝方式,但是為了了解其中的安裝過程,我們先從其他兩種安裝方式入手。
請(qǐng)查看博文:https://blog.51cto.com/wzlinux/2322616

這里我們選用第一種方式安裝。

二、主要組件說明

1、Master組件

Master組件提供集群的管理控制中心。

Master組件可以在集群中任何節(jié)點(diǎn)上運(yùn)行。但是為了簡(jiǎn)單起見,通常在一臺(tái)VM/機(jī)器上啟動(dòng)所有Master組件,并且不會(huì)在此VM/機(jī)器上運(yùn)行用戶容器

  • kube-apiserver
    kube-apiserver用于暴露Kubernetes API。任何的資源請(qǐng)求/調(diào)用操作都是通過kube-apiserver提供的接口進(jìn)行。

  • etcd
    etcd是Kubernetes提供默認(rèn)的存儲(chǔ)系統(tǒng),保存所有集群數(shù)據(jù),使用時(shí)需要為etcd數(shù)據(jù)提供備份計(jì)劃。

  • kube-controller-manager
    kube-controller-manager運(yùn)行管理控制器,它們是集群中處理常規(guī)任務(wù)的后臺(tái)線程。邏輯上,每個(gè)控制器是一個(gè)單獨(dú)的進(jìn)程,但為了降低復(fù)雜性,它們都被編譯成單個(gè)二進(jìn)制文件,并在單個(gè)進(jìn)程中運(yùn)行。

  • kube-scheduler
    kube-scheduler 監(jiān)視新創(chuàng)建沒有分配到Node的Pod,為Pod選擇一個(gè)Node。

2、Node 組件

  • kubelet
    kubelet是主要的節(jié)點(diǎn)代理,它會(huì)監(jiān)視已分配給節(jié)點(diǎn)的pod,具體功能:

    1. 安裝Pod所需的volume。
    2. 下載Pod的Secrets。
    3. Pod中運(yùn)行的 docker(或experimentally,rkt)容器。
    4. 定期執(zhí)行容器健康檢查。
    5. Reports the status of the pod back to the rest of the system, by creating a mirror pod if necessary.
    6. Reports the status of the node back to the rest of the system.
  • kube-proxy
    kube-proxy通過在主機(jī)上維護(hù)網(wǎng)絡(luò)規(guī)則并執(zhí)行連接轉(zhuǎn)發(fā)來實(shí)現(xiàn)Kubernetes服務(wù)抽象。

  • docker
    docker用于運(yùn)行容器。

  • flannel
    Flannel 是 CoreOS 團(tuán)隊(duì)針對(duì) Kubernetes 設(shè)計(jì)的一個(gè)覆蓋網(wǎng)絡(luò)(Overlay Network)工具,需要另外下載部署。我們知道當(dāng)我們啟動(dòng) Docker 后會(huì)有一個(gè)用于和容器進(jìn)行交互的 IP 地址,如果不去管理的話可能這個(gè) IP 地址在各個(gè)機(jī)器上是一樣的,并且僅限于在本機(jī)上進(jìn)行通信,無法訪問到其他機(jī)器上的 Docker 容器。Flannel 的目的就是為集群中的所有節(jié)點(diǎn)重新規(guī)劃 IP 地址的使用規(guī)則,從而使得不同節(jié)點(diǎn)上的容器能夠獲得同屬一個(gè)內(nèi)網(wǎng)且不重復(fù)的 IP 地址,并讓屬于不同節(jié)點(diǎn)上的容器能夠直接通過內(nèi)網(wǎng) IP 通信。

三、環(huán)境準(zhǔn)備

1、節(jié)點(diǎn)準(zhǔn)備

IP 角色 主要組件
172.18.8.200master:kubernetes-masterkube-apiserver,kube-apiserver,kube-controller-manager,kube-scheduler,kubelet,etcd
172.18.8.201node01:kubernetes-nodedocker,kubelet,kube-proxy,flannel
172.18.8.202node02:kubernetes-nodedocker,kubelet,kube-proxy,flannel

節(jié)點(diǎn)及網(wǎng)絡(luò)規(guī)劃圖如下:

CentOS 7.5 使用 yum 安裝 Kubernetes 集群(二)

2、現(xiàn)在倉(cāng)庫(kù)中的版本

軟件 版本
kubernetes-master1.5.2-0.7.git269f928.el7
kubernetes-node1.5.2-0.7.git269f928.el7
CentOS 7.5CentOS Linux release 7.5.1804
Dockerdocker-1.13.1-75
etcd3.2.22-1.el7
flannel0.7.1-4.el7

3、環(huán)境準(zhǔn)備

修改文件/etc/hostname。
編輯文件/etc/hosts,增加如下內(nèi)容,

172.18.8.200 master.wzlinux.com master
172.18.8.201 node01.wzlinux.com node01
172.18.8.202 node02.wzlinux.com node02

關(guān)閉防火墻。

systemctl stop firewalld.service
systemctl disable firewalld.service

關(guān)閉SELinux。

sed -i 's#SELINUX=enforcing#SELINUX=disabled#g' /etc/selinux/config
setenforce 0

關(guān)閉swap。

swapoff -a
sed -i 's/.*swap.*/#&/' /etc/fstab

四、安裝 master 節(jié)點(diǎn)

1、軟件安裝

安裝需要的軟件。

yum install kubernetes-master etcd -y

修改共用的配置文件/etc/kubernetes/config,修改master節(jié)點(diǎn),因?yàn)槲覀兌荚谝慌_(tái)機(jī)器上面,不修改也可以。

###
# kubernetes system config
#
# The following values are used to configure various aspects of all
# kubernetes services, including
#
#   kube-apiserver.service
#   kube-controller-manager.service
#   kube-scheduler.service
#   kubelet.service
#   kube-proxy.service
# logging to stderr means we get it in the systemd journal
KUBE_LOGTOSTDERR="--logtostderr=true"

# journal message level, 0 is debug
KUBE_LOG_LEVEL="--v=0"

# Should this cluster be allowed to run privileged docker containers
KUBE_ALLOW_PRIV="--allow-privileged=false"

# How the controller-manager, scheduler, and proxy find the apiserver
KUBE_MASTER="--master=http://172.18.8.200:8080"

2、配置 etcd

因?yàn)槲覀兒芏喾?wù)使用到etcd,所以我們首先配置etcd服務(wù)。
在master節(jié)點(diǎn)上編輯文件/etc/etcd/etcd.conf,修改為如下內(nèi)容,主要是修改監(jiān)聽I(yíng)P:

[root@master ~]# cat /etc/etcd/etcd.conf
#[Member]
#ETCD_CORS=""
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
#ETCD_WAL_DIR=""
#ETCD_LISTEN_PEER_URLS="http://localhost:2380"
ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
#ETCD_MAX_SNAPSHOTS="5"
#ETCD_MAX_WALS="5"
ETCD_NAME="default"
#ETCD_SNAPSHOT_COUNT="100000"
#ETCD_HEARTBEAT_INTERVAL="100"
#ETCD_ELECTION_TIMEOUT="1000"
#ETCD_QUOTA_BACKEND_BYTES="0"
#ETCD_MAX_REQUEST_BYTES="1572864"
#ETCD_GRPC_KEEPALIVE_MIN_TIME="5s"
#ETCD_GRPC_KEEPALIVE_INTERVAL="2h0m0s"
#ETCD_GRPC_KEEPALIVE_TIMEOUT="20s"
#
#[Clustering]
#ETCD_INITIAL_ADVERTISE_PEER_URLS="http://localhost:2380"
ETCD_ADVERTISE_CLIENT_URLS="http://0.0.0.0:2379"
#ETCD_DISCOVERY=""
#ETCD_DISCOVERY_FALLBACK="proxy"
#ETCD_DISCOVERY_PROXY=""
#ETCD_DISCOVERY_SRV=""
#ETCD_INITIAL_CLUSTER="default=http://localhost:2380"
#ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
#ETCD_INITIAL_CLUSTER_STATE="new"
#ETCD_STRICT_RECONFIG_CHECK="true"
#ETCD_ENABLE_V2="true"
#
#[Proxy]
#ETCD_PROXY="off"
#ETCD_PROXY_FAILURE_WAIT="5000"
#ETCD_PROXY_REFRESH_INTERVAL="30000"
#ETCD_PROXY_DIAL_TIMEOUT="1000"
#ETCD_PROXY_WRITE_TIMEOUT="5000"
#ETCD_PROXY_READ_TIMEOUT="0"
#
#[Security]
#ETCD_CERT_FILE=""
#ETCD_KEY_FILE=""
#ETCD_CLIENT_CERT_AUTH="false"
#ETCD_TRUSTED_CA_FILE=""
#ETCD_AUTO_TLS="false"
#ETCD_PEER_CERT_FILE=""
#ETCD_PEER_KEY_FILE=""
#ETCD_PEER_CLIENT_CERT_AUTH="false"
#ETCD_PEER_TRUSTED_CA_FILE=""
#ETCD_PEER_AUTO_TLS="false"
#
#[Logging]
#ETCD_DEBUG="false"
#ETCD_LOG_PACKAGE_LEVELS=""
#ETCD_LOG_OUTPUT="default"
#
#[Unsafe]
#ETCD_FORCE_NEW_CLUSTER="false"
#
#[Version]
#ETCD_VERSION="false"
#ETCD_AUTO_COMPACTION_RETENTION="0"
#
#[Profiling]
#ETCD_ENABLE_PPROF="false"
#ETCD_METRICS="basic"
#
#[Auth]
#ETCD_AUTH_TOKEN="simple"

啟動(dòng)服務(wù)。

systemctl start etcd
systemctl enable etcd

查看啟動(dòng)狀態(tài)。

[root@master ~]# netstat -tlnp|grep etcd
tcp        0      0 127.0.0.1:2380          0.0.0.0:*               LISTEN      1506/etcd           
tcp6       0      0 :::2379                 :::*                    LISTEN      1506/etcd

若要部署多節(jié)點(diǎn)集群也比較簡(jiǎn)單,參見 https://github.com/etcd-io/etcd/blob/master/Documentation/op-guide/clustering.md
[cluster]
ETCD_INITIAL_ADVERTISE_PEER_URLS:該成員節(jié)點(diǎn)在整個(gè)集群中的通信地址列表,這個(gè)地址用來傳輸集群數(shù)據(jù)的地址。因此這個(gè)地址必須是可以連接集群中所有的成員的。
ETCD_INITIAL_CLUSTER:配置集群內(nèi)部所有成員地址。

3、配置 apiserver 服務(wù)

編輯文件/etc/kubernetes/apiserver,修改為如下,注意KUBE_ADMISSION_CONTROL參數(shù):

[root@master ~]# cat /etc/kubernetes/apiserver
###
# kubernetes system config
#
# The following values are used to configure the kube-apiserver
#

# The address on the local server to listen to.
#KUBE_API_ADDRESS="--insecure-bind-address=127.0.0.1"
KUBE_API_ADDRESS="--address=0.0.0.0"

# The port on the local server to listen on.
KUBE_API_PORT="--port=8080"

# Port minions listen on
KUBELET_PORT="--kubelet-port=10250"

# Comma separated list of nodes in the etcd cluster
KUBE_ETCD_SERVERS="--etcd-servers=http://172.18.8.200:2379"

# Address range to use for services
KUBE_SERVICE_ADDRESSES="--service-cluster-ip-range=10.254.0.0/16"

# default admission control policies
#KUBE_ADMISSION_CONTROL="--admission-control=NamespaceLifecycle,NamespaceExists,LimitRanger,SecurityContextDeny,ServiceAccount,ResourceQuota"

KUBE_ADMISSION_CONTROL="--admission-control=NamespaceLifecycle,NamespaceExists,LimitRanger,ResourceQuota"

# Add your own!
KUBE_API_ARGS=""

配置/etc/kubernetes/controller-manager/etc/kubernetes/scheduler暫時(shí)不做修改,啟動(dòng)服務(wù)。

systemctl start kube-apiserver
systemctl start kube-controller-manager
systemctl start kube-scheduler
systemctl enable kube-apiserver
systemctl enable kube-controller-manager
systemctl enable kube-scheduler

查看各服務(wù)的啟動(dòng)狀態(tài)。

[root@master ~]# netstat -tlnp|grep kube-apiserver
tcp6       0      0 :::6443                 :::*                    LISTEN      1622/kube-apiserver 
tcp6       0      0 :::8080                 :::*                    LISTEN      1622/kube-apiserver 

[root@master ~]# netstat -tlnp|grep kube-scheduler
tcp6       0      0 :::10251                :::*                    LISTEN      1646/kube-scheduler

五、配置node節(jié)點(diǎn)

1、安裝需要的軟件

yum install kubernetes-node flannel docker -y

給docker配置國(guó)內(nèi)加速器。

sudo mkdir -p /etc/docker
sudo tee /etc/docker/daemon.json <<-'EOF'
{
  "registry-mirrors": ["https://hdi5v8p1.mirror.aliyuncs.com"]
}
EOF
sudo systemctl daemon-reload

所有node節(jié)點(diǎn)編輯配置文件/etc/kubernetes/config,修改為如下內(nèi)容:

###
# kubernetes system config
#
# The following values are used to configure various aspects of all
# kubernetes services, including
#
#   kube-apiserver.service
#   kube-controller-manager.service
#   kube-scheduler.service
#   kubelet.service
#   kube-proxy.service
# logging to stderr means we get it in the systemd journal
KUBE_LOGTOSTDERR="--logtostderr=true"

# journal message level, 0 is debug
KUBE_LOG_LEVEL="--v=0"

# Should this cluster be allowed to run privileged docker containers
KUBE_ALLOW_PRIV="--allow-privileged=false"

# How the controller-manager, scheduler, and proxy find the apiserver
KUBE_MASTER="--master=http://172.18.8.200:8080"

2、配置 kubelet 服務(wù)

編輯文件/etc/kubernetes/kubelet,修改內(nèi)容如下:

###
# kubernetes kubelet (minion) config

# The address for the info server to serve on (set to 0.0.0.0 or "" for all interfaces)
KUBELET_ADDRESS="--address=0.0.0.0"

# The port for the info server to serve on
#KUBELET_PORT="--port=10250"

# You may leave this blank to use the actual hostname
#KUBELET_HOSTNAME="--hostname-override=172.18.8.201"

# location of the api-server
KUBELET_API_SERVER="--api-servers=http://172.18.8.200:8080"

# pod infrastructure container
#KUBELET_POD_INFRA_CONTAINER="--pod-infra-container-image=registry.access.redhat.com/rhel7/pod-infrastructure:latest"

# Add your own!
KUBELET_ARGS=""

啟動(dòng)服務(wù)。

systemctl start kubelet
systemctl start kube-proxy
systemctl enable kubelet
systemctl enable kube-proxy

3、配置 flannel 網(wǎng)絡(luò)

編輯所有node節(jié)點(diǎn)/etc/sysconfig/flanneld,修改內(nèi)容如下:

[root@node01 ~]# cat /etc/sysconfig/flanneld
# Flanneld configuration options  

# etcd url location.  Point this to the server where etcd runs
FLANNEL_ETCD_ENDPOINTS="http://172.18.8.200:2379"

# etcd config key.  This is the configuration key that flannel queries
# For address range assignment
FLANNEL_ETCD_PREFIX="/atomic.io/network"

# Any additional options that you want to pass
#FLANNEL_OPTIONS=""

在master節(jié)點(diǎn)上為 falnnel 創(chuàng)建分配的網(wǎng)絡(luò)。

[root@master ~]#  etcdctl mk /atomic.io/network/config '{"Network": "10.244.0.0/16"}'

在各node節(jié)點(diǎn)上啟動(dòng) flannel。

systemctl start flanneld
systemctl enable flanneld

4、啟動(dòng) docker 服務(wù)

因?yàn)橐宲od使用flannel創(chuàng)建的網(wǎng)絡(luò),所以docker的啟動(dòng)要在flannel后面。

systemctl restart docker
systemctl enable docker

六、檢查驗(yàn)收

在master查看各node節(jié)點(diǎn)情況。

[root@master ~]# kubectl get nodes
NAME                 STATUS    AGE
node01.wzlinux.com   Ready     12m
node02.wzlinux.com   Ready     10m

創(chuàng)建pod。

kubectl run nginx --image=nginx --replicas=3

發(fā)現(xiàn)容器一直在創(chuàng)建。

[root@master ~]# kubectl get pods -o wide
NAME                    READY     STATUS              RESTARTS   AGE       IP        NODE
nginx-701339712-099j9   0/1       ContainerCreating   0          3m        <none>    node01.wzlinux.com
nginx-701339712-vw0zh   0/1       ContainerCreating   0          3m        <none>    node02.wzlinux.com
nginx-701339712-wqjq1   0/1       ContainerCreating   0          3m        <none>    node02.wzlinux.com

這種情況,我們可以使用kubectl describe pod POD_NAME查看Pod因?yàn)槭裁丛蛞恢笨ㄖ鳌?/p>

CentOS 7.5 使用 yum 安裝 Kubernetes 集群(二)

因?yàn)榫W(wǎng)絡(luò)的原因,這個(gè)地方我們?cè)L問不到,不過我們可以間接的獲取這個(gè)鏡像,那我們通過阿里云上面的鏡像來替代,在所以node節(jié)點(diǎn)執(zhí)行下面的命令。

docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.0
docker tag registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.0 gcr.io/google_containers/pause-amd64:3.0
docker image rm registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.0

稍等片刻,我們?cè)诓榭磒od狀態(tài),發(fā)現(xiàn)已經(jīng)OK,如果還有問題,可以繼續(xù)進(jìn)入容器查看日志。

[root@master ~]# kubectl get pods -o wide
NAME                    READY     STATUS    RESTARTS   AGE       IP            NODE
nginx-701339712-099j9   1/1       Running   0          11m       10.244.32.2   node01.wzlinux.com
nginx-701339712-vw0zh   1/1       Running   0          11m       10.244.53.3   node02.wzlinux.com
nginx-701339712-wqjq1   1/1       Running   0          11m       10.244.53.2   node02.wzlinux.com

但是還有問題,這是因?yàn)閕ptables的FORWARD是默認(rèn)禁止的,禁用了iptables filter表中FOWARD鏈,這樣會(huì)引起Kubernetes集群中跨Node的Pod無法通信。

我們這里手動(dòng)在所有node節(jié)點(diǎn)上面放行。

iptables -P FORWARD ACCEPT

附錄:版本更加新的yum倉(cāng)庫(kù)

目前自帶的 yum 源的軟件版本都比較低,也可以更改倉(cāng)庫(kù),使用稍微較高的一個(gè)版本,目前該倉(cāng)庫(kù)的版本為1.10。
http://cbs.centos.org/repos/virt7-kubernetes-110-release/x86_64/os/Packages/

cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=http://cbs.centos.org/repos/virt7-kubernetes-110-release/x86_64/os/
enabled=1
gpgcheck=0
EOF

其他的配置操作照舊,如果感覺下載速度慢,可以提前把rpm包下載下來,安裝配置好查看版本。

[root@master ~]# kubectl version
Client Version: version.Info{Major:"1", Minor:"10", GitVersion:"v1.10.3", GitCommit:"2bba0127d85d5a46ab4b778548be28623b32d0b0", GitTreeState:"archive", BuildDate:"2018-06-05T13:37:07Z", GoVersion:"go1.9.4", Compiler:"gc", Platform:"linux/amd64"}
Server Version: version.Info{Major:"1", Minor:"10", GitVersion:"v1.10.3", GitCommit:"2bba0127d85d5a46ab4b778548be28623b32d0b0", GitTreeState:"archive", BuildDate:"2018-06-05T13:37:07Z", GoVersion:"go1.9.4", Compiler:"gc", Platform:"linux/amd64"}

注意:新的版本部分配置文件有些不一樣,配置的時(shí)候請(qǐng)注意。

到此,使用yum倉(cāng)庫(kù)安裝的版本已經(jīng)完成。

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

文章題目:CentOS7.5使用yum安裝Kubernetes集群(二)-創(chuàng)新互聯(lián)
路徑分享:http://jinyejixie.com/article14/ghcde.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供外貿(mào)網(wǎng)站建設(shè)、網(wǎng)站策劃搜索引擎優(yōu)化、網(wǎng)頁(yè)設(shè)計(jì)公司、外貿(mào)建站微信公眾號(hào)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

營(yíng)銷型網(wǎng)站建設(shè)
丹寨县| 新蔡县| 腾冲县| 铁力市| 炎陵县| 临海市| 五大连池市| 鲁甸县| 儋州市| 漯河市| 佛教| 佛冈县| 桦川县| 花莲市| 临洮县| 黄冈市| 南和县| 泰顺县| 浦北县| 延安市| 东乌珠穆沁旗| 大宁县| 临泉县| 青龙| 土默特右旗| 陕西省| 井陉县| 左云县| 嘉祥县| 姜堰市| 吉水县| 牡丹江市| 易门县| 浦县| 玉林市| 白城市| 五原县| 吴旗县| 焦作市| 蒙城县| 延川县|