编写自己的ansible action plugin

趁周末把ansible action plugin 写了一个简单的例子,我们日常工作中可能很少会用到action plugin ,但是如果我们能通过action plugin 做一些初始化的工作,例如设定一些默认值,这样我们的ansible playbook 可能会简介很多 例如我们写了一个module需要传递2个参数,如果我们这个mod……

ansible filter (编写你自己的ansible filter)

有时候我们写自己的playbook的时候变量处理真的是特别让人头大,有些变量的操作在python中就很简单,但是放到ansible playbook中就会很麻烦,所以,我们今天来看一下如何编写自己的ansible filter来帮助我们处理一下变量 直接看例子吧:

我们来分……

如何创建自己的ansible module

  什么是 ansible module? Ansible modules 是一种使用python写成的一些功能块,可以在yaml文件中调用,也就是playbook中可以调用的模块,例如常见的模块 copy , debug Ansible 本身就提供了很多很多的模块 地址 什么时候和什么情况下我们会需要自己写module? 绝大……

如何通过Python 自动寻找代理增加网站的流量(刷流量PV)

好吧,无聊的时候写了一个自动获取免费代理的文章   连接地址 既然我们获得了免费的代理列表,那么有很多事情可以干,比如 , 爬取某个网站并且没有被封IP的风险, 比如, 增加某网站的流量, 下面是第一版, 这个砖就给大家提供个思路,因为之前使用urllib2 来实现,但是问题是没有办法保持他的回话,也就是不能达到真正和浏览器一样的效果,所……

iowait 过高问题的查找及解决linux

I/O问题一直是一个比较难定位的问题,今天线上环境遇到了I/O 引起的CPU负载问题,看到了如下这篇比较好的文章,完饭后的我还在和西红柿和黄瓜在减肥的路上抗争,正好将原文翻译成中文,供广大同胞品鉴   Linux 有许多可用来查找问题的简单工具,也有许多是更高级的   I/O Wait 就是一个需要使用高级的工具来de……

aws eks node 自动化扩展工具 Karpenter

我司现在使用的自动化扩展工具是ASG , 他可以做到自动根据cluster的一些指标进行增加或者删除node, 一般以分钟为计时单位,几分钟可以创建出一个node Karpenter是一个新的自动扩缩容工具,不经过ASG,直接和ec2进行交互,可以做到秒级新增node 原理和其他的operator类似,需要在我们的eks中部署一个pod作……

public key fingerprint

有时候我们本地有很多key,我们把对应的public key上传到对应的地方以后,坑爹的分不出来哪个是哪个 例如gitlab, deploy keys, 只显示 fingerprint   这个时候,我们可以找到我们本地的公钥,通过如下命令生成fingerprint [crayon-647dacd940605342129929/……

aws eks 中 的权限 AWS IAM 权限挂钩的

首先,我们经常使用AWS的知道AWS 有IAM ,我们可以创建一些用户,或者role,然后赋予这些role一定的权限:例如,读写s3 , 那么谁拥有了这个role ,或者assume到这个role就获得了这些权限 那么,我们如何和eks进行关联呢? 例如:我现在公司里已经每个人有一个aws账号了,我想让一部分人只有 view的权限:例如 ……

asyncio python 协程

python 中的协程其实就是一种高效的任务切换模式: 遇到需要等待的(例如io等待), 直接跳到其他任务去执行,不会傻傻的等到io结束才向下执行 先看一个如果没有异步的例子:

运行结果:

也就是说,我们如果……

如何快速分析我们存储在s3中的文件(日志)

答案是aws Athena 我们会将很多日志存储到我们的s3,例如s3的读写日志,elb日志 等 但是由于s3的存储特殊,我们想要分析一段时间的日志非常麻烦,哪怕下载到本地也需要想办法导入其他工具分析 现在aws提供了一个自己的工具让我们能使用SQL语句来直接查询我们s3里边的日志,不需要下载,非常强大 他的原理很简单,其实就是创建了一个……

Route53 Routing policy

AWS 的route53是一个非常强大的工具,除了我们常用的就是A记录,一个域名对应一个IP地址 除了这个以外,Route53 的Routing policy 可以通过如下方式添加多条记录:   这样添加以后,每次我们去查询,会给我们返回两个IP,我们的浏览器会挑选一个…..也就是说你随机访问这两个IP,这种rout……

aws 启用mfa以后,如何使用cli 命令行

  为了安全,很多账号都启用了二步认证,mfa,也就是你除了需要输入正确的账号密码以外,你还需要输入一个6位数字,这个数字是由硬件或者软件(google authenticator)绑定账号后生成,这样的话即使账号密码丢失也没事   并且,启用mfa以后,你不可以直接使用export AWS_PROFILE=jerem……

限制读取s3的某个文件夹下文件的权限

  例如我们只想开放给某个role  我们s3中特定的一个文件夹下的东西 我的s3 叫my-s3   GetObject 是说如果你知道路径了,直接下载没问题,但是如果你想使用一些

这种下……