python3学习

Kafka动态增加Topic的副本

admin 2020-02-21 10:21:01 python运维开发

 2694°

 20

由于Producer和Consumer都只会与Leader角色的分区副本相连，所以kafka需要以集群的组织形式提供主题下的消息高可用。kafka支持主备复制，所以消息具备高可用和持久性。

Python 多环境配置管理

admin 2020-02-20 13:20:14 python运维开发

 2320°

 20

实际工程开发中常常会对开发、测试和生产等不同环境配置不同的数据库环境，传统方式可以通过添加不同环境的配置文件达到部署时的动态切换的效果。

分布式任务调度系统xxl-job搭建(基于docker)

admin 2020-02-20 13:16:04 python运维开发

 2833°

 20

XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。

websocket+Django+python+paramiko实现web页面执行命令并实时输出

admin 2020-02-20 13:08:23 python运维开发

 2979°

 20

WebSocket的工作流程：浏览器通过JavaScript向服务端发出建立WebSocket连接的请求，在WebSocket连接建立成功后，客户端和服务端就可以通过 TCP连接传输数据。

docker 运行Django项目

admin 2020-02-19 19:39:06 python运维开发

 2320°

 20

已经写好了一个Django项目，需要将这个项目用docker封装一个镜像，使用k8s发布！在封装并运行的过程中，发现了很多问题，这里会一一介绍！

Python 检测系统时间,k8s版本,redis集群,etcd,mysql,ceph,kafka

admin 2020-02-19 19:34:18 python运维开发

 2804°

 20

线上有一套k8s集群，部署了很多应用。现在需要对一些基础服务做一些常规检测，比如：

Grafana 监控系统是否重启

admin 2020-02-19 19:27:09 python运维开发

 2737°

 20

Linux 内核（以下简称内核）是一个不与特定进程相关的功能集合，内核的代码很难轻易的在调试器中执行和跟踪。

Python 协程检测Kubernetes服务端口

admin 2020-02-18 09:49:15 python运维开发

 2350°

 20

已经得到了需要的数据，现在需要对这些端口做检测，判断端口是否正常！实际情况是，有上百个端口需要检测。如果一个个检测，可能需要花费几分钟的时间，效率不够快！

python过滤 Kubernetes api数据

admin 2020-02-18 09:46:16 python运维开发

 2469°

 20

kafka查看消费数据

admin 2020-02-18 09:41:59 python运维开发

 3422°

 20

在老版本中，使用kafka-run-class.sh 脚本进行查看。但是对于最新版本，kafka-run-class.sh 已经不能使用，必须使用另外一个脚本才行，它就是kafka-consumer-groups.sh

Python Elasticsearch api

admin 2020-02-17 21:37:18 python运维开发

 3041°

 20

ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。下面介绍了利用Python API接口进行数据查询，方便其他系统的调用。

Kafka 集群配置SASL+ACL

admin 2020-02-17 21:22:23 python运维开发

 3904°

 20

在Kafka0.9版本之前，Kafka集群时没有安全机制的。Kafka Client应用可以通过连接Zookeeper地址，例如zk1:2181:zk2:2181,zk3:2181等。

kafka集群搭建

admin 2020-02-17 21:01:09 python运维开发

 3288°

 20

一个典型的Kafka 集群中包含若干Producer（可以是web 前端产生的Page View，或者是服务器日志，系统 CPU、Memory 等），

kafka基本版与kafka acl版性能对比(单机版)

admin 2020-02-16 19:05:30 python运维开发

 2678°

 20

线上已经有kafka集群，服务运行稳定。但是因为产品升级，需要对kakfa做安全测试，也就是权限验证。

Kafka压力测试(自带测试脚本)(单机版)

admin 2020-02-16 18:58:09 python运维开发

 2644°

 20

本次性能测试在正式环境下单台服务器上Kafka处理MQ消息能力进行压力测试。

Filebeat入门

admin 2020-02-16 18:52:17 python运维开发

 2888°

 20

Beats 是安装在服务器上的数据中转代理。

Kubernetes 部署kafka ACL(单机版)

admin 2020-02-15 17:58:46 python运维开发

 2787°

 20

在Kafka0.9版本之前，Kafka集群时没有安全机制的。Kafka Client应用可以通过连接Zookeeper地址，例如zk1:2181:zk2:2181,zk3:2181等。

Kubernetes之YAML文件

admin 2020-02-15 17:50:32 python运维开发

 2504°

 20

YAML是专门用来写配置文件的语言，非常简洁和强大，使用比json更方便。它实质上是一种通用的数据串行化格式。后文会说明定义YAML文件创建Pod和创建Deployment。

Kafka ACL使用实战(单机版)

admin 2020-02-15 17:45:52 python运维开发

 2711°

 20

自0.9.0.0.版本引入Security之后，Kafka一直在完善security的功能。当前Kafka security主要包含3大功能：认证(authentication)、信道加密(encryption)和授权(authorization)。

Docker容器跨主机通信之：直接路由方式

admin 2020-02-14 19:02:24 python运维开发

 2956°

 20

直观上看，要实现网络通信，机器需要至少一个网络接口（物理接口或虚拟接口）与外界相通，并可以收发数据包；此外，如果不同子网之间要进行通信，需要额外的路由机制。