AI 助理
备案控制台
开发者社区 云原生 文章 正文

userdata for ECS使用场景介绍

2017-03-09 8032
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
云数据库 RDS MySQL，集群系列 2核4GB
推荐场景：
搭建个人博客
资源编排，不限时长
简介： cloud-init是一个运行在实例里面用来初始化实例的服务，它能够在云主机启动时加载和执行用户提供的数据(userdata)，这个服务在自动部署或者部署大规模实例的时候给用户提供了极大便捷性。本文介绍了一些典型的userdata使用场景，帮助您定制个性化云主机。

cloud-init/userdata/metadata概述

cloud-init是一个运行在实例里面用来初始化实例的服务，它能够在云主机启动时加载和执行用户提供的数据，在实例启动的时候设置主机Hostname, 修改网络配置，下载一些包并进行安装等。这个服务在自动部署或者部署大规模实例的时候给用户提供了极大便捷性。


userdata即云主机启动时用户提供的数据，它是实现云主机个性化定制的基础，在userdata出现之前，可以认为我们购买的云主机环境和配置都是相同的，而企业或个人根据自身的使用场景和需求来输入有效的userdata后,我们的云主机在初次启动之后便是你需要的云主机，免去了用户自己手动配置的麻烦。


metadata是云平台提供的云主机属性信息，在创建云主机的时候做默认配置，目前包括hostname、镜像名称、网络类型、ip地址等18个属性值，以键值对的形式给出。


Datasource是userdata/metadata的出处，阿里云是通过一个http服务（IP:100.100.100.200）来提供数据源。在vpc网络下云服务器可以访问这个数据源获取相关的metadata和userdata信息。

userdata格式

userdata的格式具体的可见官方文档,这里主要说明userdata-scripts和cloud-config两种常用的格式。

userdata-scripts：适用于需要通过执行shell脚本初始化实例的用户,以“#!/bin/sh”开头，从用户数据来看目前大部分用户都是直接通过这种格式输入userdata的, 也适用于较复杂的部署场景。

cloud-config: 是cloud-init支持的特有格式,它把常用的个性化配置包装成YAML文件格式提供出来，通过这种形式可以更方便的完成常用配置，以“#cloud-config”为首行区分，紧随其后的是一个关联数组，提供的键包括ssh_authorized_keys、hostname、write_files、manage_etc_hosts等。

典型使用场景

场景一：ssh认证

由于目前阿里云主机暂不支持key pairs，用户可以通过userdata做ssh认证，将本地已生成的ssh公共秘钥置入到ECS中，免密登陆在批量操作云服务器时能够提供较高的便捷性。如：

#!/bin/sh
export ssh_directory="/root/.ssh"
export authorized_keys=${ssh_directory}/authorized_keys
echo ${user_public_key} >> ${ssh_directory}/authorized_keys
user_public_key='ssh-rsa AAAAB3NzaC1yc2EAAAABIwAAAGEA3FSyQwBI6Z+nCSjUUk8EEAnnkhXlukKoUPND/RRClWz2s5TCzIkd3Ou5+Cyz71X0XmazM3l5WgeErvtIwQMyT1KjNoMhoJMrJnWqQPOt5Q8zWd9qG7PBl9+eiH5qV7NZ mykey@host'

Cloud-config也提供了key支持ssh的认证，使用起来更便捷：

#cloud-config：
ssh_authorized_keys:
 - ssh-rsa AAAAB3NzaC1yc2EAAAABIwAAAGEA3FSyQwBI6Z+nCSjUUk8EEAnnkhXlukKoUPND/RRClWz2s5TCzIkd3Ou5+Cyz71X0XmazM3l5WgeErvtIwQMyT1KjNoMhoJMrJnWqQPOt5Q8zWd9qG7PBl9+eiH5qV7NZ mykey@host

场景二：更新和配置软件源

这个场景也同样具有普适性，包括增加yum/apt的仓库,yum/apt源的更新和配置等。yum/apt源的更新通过cloud-config非常简单地完成。

更新yum／apt源： 
#cloud-config
package_upgrade: true

添加yum仓库：

yum_repos:
 # 仓库名称
 epel-testing:
 baseurl: http://download.fedoraproject.org/pub/epel/testing/5/$basearch
 enabled: false
 failovermethod: priority
 gpgcheck: true
 gpgkey: file:///etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL
 name: Extra Packages for Enterprise Linux 5 - Testing

添加apt仓库：

apt:
 primary:
 - arches: [default]
 uri: http://us.archive.ubuntu.com/ubuntu/

场景三：DNS配置

cloud-init启动方式下dns地址默认是由dhcp server来自动配置的，某些情况下用户需要配置自己的dns服务器，例如有一个用户场景是：对windows服务器的运维使用到加域操作，一般会使用局域网内部的域控服务器作为dns，那么对于需要加域操作的windows服务器即可统一使用userdata来配置。

#!bin/bash
export dns_directory="/etc/resolvconf/resolv.conf.d/base"
export dhcp_dicrectory="/etc/dhcp/dhclient.conf"
export user_dns = "nameserver 8.8.8.8"
echo ${user_dns} >> ${dns_directory}
export "supersede domain-name-servers 8.8.8.8" >> ${dhcp_directory}

上面是ubuntu中的一个例子，dhcpclient中supersede的配置是为了避免再次启动时dhcp重写了本地配置的dns地址。也可以使用cloud-config格式的userdata，cloud-config提供了manage-resolve-conf键来支持修改resolve-conf中的配置。

manage-resolv-conf: true

resolv_conf:
 nameservers: ['8.8.4.4', '8.8.8.8']
 searchdomains:
 - foo.example.com
 - bar.example.com
 domain: example.com
 options:
 rotate: true
 timeout: 1

场景四：安装配置应用

如果只是安装软件源仓库中的软件可以直接使用cloud-config格式的userdata,安装包以列表形式给出，也可以指定特定的版本即[<package>,<version>]的格式:

packages:
 - pwgen
 - pastebinit
 - [libpython2.7, 2.7.3-0ubuntu3.1]

大部分的应用安装和部署需要一个流程化的步骤，例如使用场景比较多的docker，针对docker应用编写出该流程对应的shell脚本，可以通过userdata-scripts来安装配置。如果安装脚本比较复杂，通常不直接写在userdata-scripts中，而是部署在远程服务器上，通过curl下载到云服务器中再执行。

场景五：磁盘操作

购买云服务器可能会增加多个数据盘，对于数据盘挂载点的设置、分区等也可以在启动之前就通过uerdata配置好，例如： 
#!/bin/sh
mkfs.ext4 /dev/vd1
mkdir $mountpoint
/dev/vd1 $mountpoint ext4 defaults 0 0
mount -a
chmod -R 777 $mountpoint
fdisk -S 56 /dev/vd1
cat ~/test_ftab >> /etc/fstab
touch ~/test_ftab

用户案例

下面以两个典型的案例为切入点，说明在为用户提供服务的过程使用userdata的好处：

案例一：userdata for 容器服务

容器服务是一种高性能可伸缩的容器管理服务，它支持在一组阿里云云服务器上通过Docker容器来运行或编排应用。其中一个重要的特性是支持多种服务托管方式：支持授权容器服务创建云服务器加入到指定集群也支持将已购买的云服务器添加到指定集群。这里云服务器的配置便是利用userdata实现，借此真正意义上地完成了服务器的一键托管。
容器服务在userdata的使用上已经比较成熟，实现的操作涵盖以上典型场景，包括：
安装内核更新，安装文件传输工具curl,设置集群内部节点的路由规则，安装、配置、启动docker等，所有的配置都在userdata中完成，所以服务器在初次启动之后便能完成它在集群管理中的功能，承担集群中的角色，省去了初始化的配置且在新建服务器添加到指定集群时，对用户基本是无感知的。

#!bin/bash
tokens='{"tokens": ["", ""]}'
ucp_controller_ip='192.168.33.*'
ip_addr=ifconfig eth0 | awk '/inet addr:/{print $2}' | tr -d 'addr:'
host_name=hostname

#更新软件源并安装依赖的软件包
apt-get update
apt-get install -y apt-transport-https，linux-image-extra-virtual，curl,unzip,jq

#通过keyserver拿到publickey做sshkey认证
curl -s 'https://sks-keyservers.net/***' | apt-key add --import

#从oss上获取docker安装脚本并执行
curl -sSL https://***.com/install.sh | sh

#配置自己的registry mirror
echo DOCKER_OPTS="'--registry-mirror https://***.aliyuncs.com'" > /etc/default/docker
service docker restart
usermod -aG docker $USER
echo tokens > /tmp/tokens token=`echo "tokens>/tmp/tokenstoken=‘echo"tokens" | jq '.tokens'[1] | xargs echo `
echo token > /tmp/manager_token cmd="curl -i -X POST -H 'Content-Type: application/json' -H 'Accept: application/json' -H 'x-acs-region-id: cn-beijing' http://100.100.100.* -d '{\"data\" : \"token"}'"
eval $cmd

#swarm集群部署,将ECS节点添加到集群中
docker swarm join --token=$token ${ucp_controller_ip}:2377
echo $token > /tmp/fin_manager_token

案例二：userdata for 资源编排（ROS）

通过阿里云的资源编排服务，ROS，可以很方便的创建一组资源。但是创建资源只是第一步，需要把应用部署上去，userdata便是实现对应用一键构建的关键。
例如：用户需要在云服务器中搭建一个WordPress平台，首先需要安装 WordPress 所依赖的基础服务：Apache、MySQL 以及 PHP，然后下载最新版本的 WordPress 包并进行安装，最后根据 WordPress的搭建需求，对基础依赖服务进行相应的配置。用户只需要针对应用编写出该流程对应的 Shell 脚本，ROS也提供了相应的脚本模版，只将数据库的名称、用户名及其密码作为用户的输入参数, 一键生成usredata模版再配置ROS模版样例中。

#!/bin/bash
#用户输入参数
DatabaseUser=DatabaseUser DatabasePwd=DatabaseUserDatabasePwd=DatabasePwd
DatabaseName=$DatabaseName
WebRootPath='/var/www/html'
ApacheIndex='Options Indexes FollowSymLinks'
ApacheIndexReplace='Options -Indexes FollowSymLinks'

#安装Wordpress所依赖的服务
yum install -y curl httpd mysql-server php php-common php-mysql
yum install -y php-gd php-imap php-ldap php-odbc php-pear php-xml php-xmlrpc

#设置apache和mysql服务为开机自启动
chkconfig httpd on
chkconfig mysqld on

#下载Wordpress最新安装包，并配置其对数据库的访问
wget http://wordpress.org/latest.tar.gz
tar -xzvf latest.tar.gz
sed -i "s/database_name_here/DatabaseName/" wordpress/wp-config-sample.php sed -i "s/username_here/DatabaseName/"wordpress/wp−config−sample.phpsed−i"s/username​h​​ere/DatabaseUser/" wordpress/wp-config-sample.php
sed -i "s/password_here/{DatabasePwd:-DatabasePwdDef}/" wordpress/wp-config-sample.php

#设置WordPress安装位置
mv wordpress/wp-config-sample.php wordpress/wp-config.php
cp -a wordpress/ $WebRootPath
rm -rf wordpress* latest.tar.gz

#将Wordpress目录及其里面文件的所有者和所有组更改为 apache 用户和 apache 组
service httpd stop
usermod -d $WebRootPath apache
chown apache:apache -R $WebRootPath

#为了安全起见，关闭目录浏览功能
sed -i "s/ApacheIndex/ApacheIndex/ApacheIndexReplace/" /etc/httpd/conf/httpd.conf
service httpd start

#新建wordpress数据库，新增mysql用户，并赋权给它对应为 wordpress 数据库全部权限
service mysqld start
chmod 400 /etc/my.cnf
mysql -u root << EOF
CREATE DATABASE $DatabaseName default charset utf8 COLLATE utf8_general_ci;
CREATE USER DatabaseUser IDENTIFIED by 'DatabaseUserIDENTIFIEDby​′​​DababasePwd';
grant all on $DatabaseName.* to DatabaseUser@localhost identified by 'DatabaseUser@localhostidentifiedby​′​​DatabasePwd'；

利用metadata来配置userdata

利用metadata来配置userdata在需要获取云服务器相关配置的时候比较便捷，可以实现云服务器的动态配置。例如某个场景下需要配置一条路由或者防火墙规则，为了得到云服务器的ip地址，我看到大多用户常规的做法是通过系统命令和正则表达式来提取ip信息：

ifconfig eth0 | awk '/inet addr:/{print $2}' | tr -d 'addr:'
但其实只需要在userdata-scripts中先安装curl,再去访问数据源，这些信息在meta-data中都可以轻松获取，ip地址的在metadata键为private-ipv4: 
curl http://100.100.100.200/meta-data/private-ipv4
所有meta-data的种类可以通过访问数据源得到，如果metadata已经包括了你在动态配置中用到的云主机相关属性，则可以利用metadata编写userdata。 
curl http://100.100.100.200/latest/meta-data
此外，对于创建云主机的时候设置过User-Data的实例，可以通过访问下面的地址查询userdata信息： 
curl http://100.100.100.200/latest/usre-date

FAQ:

Q1:使用userdata有哪些限制？

A1:目前ECS的userdata功能支持vpc+io优化的实例，在购买这类实例时，可以使用userdata功能。此外，由于userdata依赖于cloud-init服务，镜像中需要安装cloud-init。


Q2:如何知道阿里云提供的镜像是否支持cloud-init？

A2:对于从购买页面购买ECS的用户，当您选择的实例属性满足vpc＋io优化条件的情况下，选择了支持cloud-init的镜像，购买页面会有userdata输入框供您输入。对于使用OpenAPI购买ECS的用户，建议先调用查询可用镜像接口，可以在入参添加IsSupportCloudInit＝true来查询支持cloud-init的镜像。


Q3:userdata只能在初次启动的时候输入么？

A3:不是。除了在购买ECS的时候就可以输入userdata ,对于已经使用的ECS，停机之后也可以选择"设置用户数据"操作，在下一次启动的时候生效，当然这部分userdata的功能不能够依赖于初次启动的逻辑，否则不会生效。

总结：

定制化云服务器已然成为云服务器的发展趋势，目前ECS大部分的系统镜像都支持cloud-init，同时也能够支持基于系统镜像创建自定义镜像的userdata功能，不过从目前的数据来看对cloud-init有感知的用户还比较少，然而其实userdata的使用场景非常广，只要你有配置云服务器的需求，尤其是在这种需求批量化模版化的情况下，userdata是再好不过的选择，希望大家可以多多结合自身的应用场景，使用userdata功能定制只属于你的云主机。

文章标签：
云服务器 ECS
容器计算服务
云解析DNS
云数据库 RDS MySQL 版
资源编排
容器
弹性计算
Shell
Docker
Apache
关键词：
云服务器 ECS使用场景
相关实践学习
2分钟自动化部署人生模拟器
本场景将带你借助云效流水线Flow实现人生模拟器小游戏的自动化部署
7天玩转云服务器
云服务器ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，可降低 IT 成本，提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情:&nbsp;https://www.aliyun.com/product/ecs
蓁好
目录
相关文章
程序媛在线
|
6月前
|
机器学习/深度学习 人工智能 弹性计算
阿里云GPU云服务器介绍_GPU租用费用_GPU优势和使用场景说明
阿里云GPU云服务器提供NVIDIA A10、V100、T4、P4、P100等GPU卡，结合高性能CPU，单实例计算性能高达5PFLOPS。支持多种实例规格，如A10卡GN7i、V100-16G卡GN6v等，应用于深度学习、科学计算等场景。GPU服务器租用费用因实例规格而异，如A10卡GN7i每月3213.99元起。阿里云还提供GPU加速软件如AIACC-Training、AIACC-Inference等。网络性能强大，VPC支持2400万PPS和160Gbps内网带宽。购买方式灵活，包括包年包月、按量付费等。客户案例包括深势科技、流利说和小牛翻译等。
程序媛在线
207 4
张柏镒
|
6月前
|
机器学习/深度学习 弹性计算 前端开发
阿里云服务器ECS计算型c8i使用场景说明，可以用来哪些？
阿里云新推CIPU架构的计算型c8i实例，搭载Intel® Xeon®最新处理器，主频2.7 GHz起，全核睿频3.2 GHz，确保强大计算与I/O性能。适用于机器学习、数据分析、游戏服务器等场景。欲知详细配置及报价
张柏镒
48 0
现在是571
|
7月前
|
存储 缓存 NoSQL
【服务器】Java连接redis及使用Java操作redis、使用场景
【服务器】Java连接redis及使用Java操作redis、使用场景
现在是571
731 0
jiajia158
|
弹性计算 监控 安全
如何根据使用场景选择阿里云服务器实例，后期如何查看云服务器使用情况
很多以前没用过云服务器产品的新手用户在选购阿里云服务器时面对阿里云多达几十种的云服务器实例，往往不知道如何选择，这时候就需要我们根据我们的使用场景和官方指导资料来决定我们选择哪款实例规格的云服务器，云服务器购买之后，我们还需要随时了解云服务器的使用情况，特别是cpu、内存、带宽等使用情况是否有异常，从而决定我们是否需要升级云服务器配置等操作。
jiajia158
331 0
如何根据使用场景选择阿里云服务器实例，后期如何查看云服务器使用情况
康波周期
|
弹性计算 缓存 网络协议
阿里云通用算力型u1实例云服务器优势、价格及计算能力和使用场景介绍
阿里云通用算力型u1实例云服务器优势、价格及计算能力和使用场景介绍
康波周期
363 0
新手站长网
|
存储 弹性计算 大数据
阿里云服务器全方位介绍（产品优势/使用场景/限制说明）
阿里云服务器全方位介绍包括云服务器ECS优势、云服务器租用价格、云服务器使用场景及限制说明，阿里云服务器网分享云服务器ECS介绍、个人和企业免费试用、云服务器活动、云服务器ECS规格、优势、功能及应用场景详细你说明
新手站长网
127 0
云小弟指导上云
|
编解码 分布式计算 安全
阿里云计算型c7、通用型g7和内存型r7云服务器网络带宽能力及详细使用场景介绍
计算型c7、通用型g7和内存型r7是阿里云推荐的上云首选第七代云服务器，突破算力极限，属于高性价比云服务器，极致性能，安全加码，覆盖多行业场景应用，,由于计算型c7实例vCPU内存比为1:2，通用型g7实例vCPU内存比为1:4，内存型r7实例vCPU内存比为1:8，因此，不同实例就会有多种配置可选，不同配置的网络带宽能力及详细使用场景是不同的，下面小编为大家介绍下计算型c7、通用型g7和内存型r7系列云服务器不同实例规格的情况下具体的网络带宽能力及详细使用场景。
云小弟指导上云
885 0
新手站长网
|
存储 机器学习/深度学习 弹性计算
阿里云服务器优势_功能_价格_使用场景全方位介绍
阿里云服务器优势_功能_价格_使用场景全方位介绍，阿里云服务器全方位介绍包括云服务器ECS优势、云服务器租用价格、云服务器使用场景及限制说明，阿里云服务器网分享云服务器ECS介绍、个人和企业免费试用、云服务器活动、云服务器ECS规格、优势、功能及应用场景详细你说明
新手站长网
75 0
新手站长网
|
存储 机器学习/深度学习 弹性计算
阿里云服务器ECS全方位介绍_优势功能_价格_使用场景
阿里云服务器ECS全方位介绍_优势功能_价格_使用场景，阿里云服务器全方位介绍包括云服务器ECS优势、云服务器租用价格、云服务器使用场景及限制说明，阿里云服务器网分享云服务器ECS介绍、个人和企业免费试用、云服务器活动、云服务器ECS规格、优势、功能及应用场景详细你说明
新手站长网
161 0
新手站长网
|
数据采集 机器学习/深度学习 人工智能
云服务器可以用来做什么？云服务器使用场景列举
阿里云服务器经常推出一些拼团或者秒杀活动，很多同学看价格不错就抢了。可是云服务器买到手却不知道做什么，新手站长网列举云服务器常见的使用场景，方便大家参考，别再让你的云服务器吃灰了
新手站长网
2050 1

热门文章

最新文章

  • 1
    网络管理自动化之三、SMS服务器的配置详解
  • 2
    无公网IP，SSH远程连接Linux CentOS服务器【内网穿透】
  • 3
    Samba服务器的安装配置【十全十美】
  • 4
    重装linux服务器后开不了机
  • 5
    手把手带你部署Java项目到Linux服务器
  • 6
    【开发工具】【windows】Visual Studio Code(VS Code)远程Linux服务器环境搭建——SFTP篇
  • 7
    阿里云服务器申请免费试用图文教程（个人和企业均可申请）
  • 8
    基于ECS搭建GitLab服务
  • 9
    RAKsmart高防服务器的优势是什么？这篇文章给你答案
  • 10
    【Java学习笔记】TCP客户端/服务器端
  • 1
    ECS使用体验的文章
    24
  • 2
    MySQL服务器性能调优的顶级策略14
    70
  • 3
    高校学生在家实践ECS弹性云服务器
    37
  • 4
    阿里云ecs使用体验
    36
  • 5
    inishConnect(..) failed: Connection refused，服务本地正常服务器网关报400，nacos服务实例不能下线
    105
  • 6
    带你读《阿里云产品五月刊》——四、轻量应用服务器在11个地域新开服
    68
  • 7
    带你读《阿里云产品五月刊》——七、最佳实践：阿里云倚天ECS在千寻位置时空智能服务的规模化应用
    57
  • 8
    算力服务器的崛起：技术革新与市场展望
    134
  • 9
    ECS使用体验的文章
    36
  • 10
    服务器数据恢复—RAID5阵列重建导致原raid数据丢失的数据恢复案例
    72

    • 相关课程

    更多
  • ECS上云入门三部曲
  • 服务器硬件基础
  • Linux Web服务器Nginx搭建与配置
  • 7天玩转云服务器
  • 云服务器选型、迁云最佳实践
  • 云服务器ECS基本操作

    • 相关电子书

    更多
  • 如何运维千台以上游戏云服务器
  • 网站/服务器取证 实践与挑战
  • ECS计算与存储分离架构实践

    • 相关实验场景

    更多
  • 使用ECS和RDS搭建个人博客
  • 利用云备份Cloud Backup实现ECS文件备份
  • 基于ECS搭建FTP服务
  • 基于ECS和NAS搭建个人网盘
  • 使用ECS和OSS搭建个人网盘
  • 基于ECS搭建云上博客
    • 下一篇
    无影云桌面