杂烩饭

selenium 是一个 python 库, 用于操作 chromium 浏览器实现一些自动化的动作, 本文是为了把 grafana 的监控图截图保存, 后续可以将图片做成运维报表之类的. 调试阶段调试阶段可以使用电脑上的 chrome,并关闭 headless 模式,方便看到界面执行的效果.chrome 官网下载即可, chromedriver 下载地址: https://googlechromelabs.github.io/chrome-for-testing/ , chromedriver 放在代码同目录即可. 问题为什么不用 grafana-image-renderer, 这个官方插件 BUG 挺多的, 比如一个图需要很长时间才能加载, 就会出现图还没加载出来, 就完成了截图的情况. 并且截图速度很慢. 简单的开始1pip install selenium 12345678910111213141516171819202122232425from selenium import webdriverfrom...

正常情况下收集日志流程为： filebeat 读取节点上指定目录日志文件 –> kafka logstash 消费 kafka 数据 –> 写入到 ES 的指定索引加入 kafka 会提高健壮性，可以起到削峰填谷的效果。现在是非生产环境没有 kafka，所以才采用 filebeat 写入到 ES 这种方案。另一种架构：在Kubernetes下收集ingress日志到Elasticsearch 输入配置输入就是源日志的配置， 我这里配置了 2 个日志源，一个是 nginx ingress 的配置，记录的是所有请求的访问日志，另一个是业务 pod 的日志。通过 fields.log_topic 来配合下面的 output 来区分怎么输出。 1234567891011121314151617181920212223242526272829303132333435363738394041424344454647filebeat.inputs:- type: container symlinks: true enabled: true tail_files:...

安装可以使用命令： 1grafana-cli plugins install grafana-image-renderer 如果不能正常访问网络，或者下载速度太慢，可以使用离线包：到这里https://grafana.com/grafana/plugins/grafana-image-renderer/?tab=installation下载离线包，然后放到 plugins 文件夹下。需要注意下 plugins 文件夹的位置，可能使用命令安装的路径和真实的 plugins 目录不一致。 如果插件启动失败，报错：可以检查下 plugins/grafana-image-renderer/chrome-headless-shell/linux-136.0.7101.0/chrome-headless-shell-linux64 这个程序能否正常运行，如果报错 需要安装 apt install -y...

官方配置文档在这里：https://grafana.com/docs/grafana/latest/setup-grafana/image-rendering/ 使用方式有两种，一种是直接在 grafana 机器上安装插件，另一个是使用外挂渲染器的方式。 部署渲染器 grafana-image-renderer 官方有现成的镜像，也可以不用自己构建镜像: grafana/grafana-image-renderer:3.12.3 也可以用 bitnami 打包的镜像：bitnami/grafana-image-renderer:latest， 我哼哧哼哧搞了半天才想起来官方也有镜像😓 我的 grafana 是运行在 kubernetes 里的，所以选择用外挂渲染器的方法。渲染器核心用的是 Puppeteer，根据官网文档安装依赖包：https://pptr.dev/troubleshooting#chrome-doesnt-launch-on-linux ，另外增加了中文字体包，解决了中文显示框框的问题。最终的渲染器镜像 dockerfile...

构建容器镜像对运维来说已经轻车熟路了，但是最近遇到个问题百思不得其解，准确的说就是手动执行 java -jar 带上所有参数，可以正常启动，但是打包成镜像就会报错： 先附上 entrypoint.sh 123456789101112131415161718192021222324252627#!/bin/bashif [ -n "$JVM_PARAM" ];then echo "JVM_PARAM: $JVM_PARAM"else JVM_PARAM="-Xms2g -Xmx2g -XX:MetaspaceSize=256m -XX:MaxMetaspaceSize=512m"fiif [ -n "$JVM_OPTS" ];then echo "JVM_OPTS: $JVM_OPTS"else JVM_OPTS="-XX:+UseConcMarkSweepGC -XX:+UseCMSInitiatingOccupancyOnly...

安装一些基础包12sudo dnf install -y hyperv-toolssudo dnf install -y xrdp xrdp-selinux 配置 Fedora12345678910111213141516171819202122232425systemctl enable xrdpsystemctl enable xrdp-sesman# use vsock transport.sed -i_orig -e 's/port=3389/port=vsock:\/\/-1:3389/g' /etc/xrdp/xrdp.ini# use rdp security.sed -i_orig -e 's/security_layer=negotiate/security_layer=rdp/g' /etc/xrdp/xrdp.ini# remove encryption validation.sed -i_orig -e 's/crypt_level=high/crypt_level=none/g'...

我们的业务场景是 ES 存储的都是一些不太重要的日志，但是对存储比较敏感，但是查看了 ES 索引都是默认创建了一个副本的。这会造成存储空间翻倍。现在通过调整 logstash 配置来实现创建出来的索引应用自定义配置，比如可以实现 30 天前的日志自动清理，默认不创建副本等。 创建生命周期策略在 ES 上创建一个生命周期策略，定义索引保留 14 天。 1234567891011121314151617PUT _ilm/policy/user_monitor_point-retention-policy{ "policy": { "phases": { "hot": { "min_age": "0ms", "actions": {} }, "delete": { ...

GitHub 地址：https://github.com/sml2h3/ddddocr 安装 1pip install ddddocr 如果 windows 安装报错：ImportError：DLL load failed: 找不到指定的模块。需要安装 vc 运行库：https://aka.ms/vs/16/release/VC_redist.x86.exe https://aka.ms/vs/16/release/VC_redist.x64.exe 基本使用： 1234567import ddddocrocr = ddddocr.DdddOcr(show_ad=False)image = open("example.jpg", "rb").read()result = ocr.classification(image)print(result) 初始化传参 show_ad=False 输出就不带作者的广告了。

powerlevel10k 是 zsh 上很好看的主题，我一直是在 wsl 里用，配合 Windows Terminal 很好看，不过在 PyCharm 里打开会乱码，可以通过修改控制台字体为支持 powerline 的字体，不过还是不完美，有时候还有 BUG。 想了下，我平时都是在 Windows Terminal 上用的，那么可以让使用 Windows Terminal 的时候显示成花里胡哨的主题，用其他软件比如 PyCharm 或者 VScode 的时候，换成朴素的主题。看了下，在 Windows Terminal 上有个特殊的环境变量 WT_SESSION 和 WT_PROFILE_ID ，看名字应该是和 Windows terminal 有关，测试了下也确实如此，那么可以修改 ~/.zshrc 来实现。 12345if [[ $WT_SESSION ]]; then ZSH_THEME="powerlevel10k/powerlevel10k"else ZSH_THEME="robbyrussell"fi 此时显示如下：

2.0.3 版本的 BUG详细 bug 在 GitHub 上有，比如： issue 链接见：https://github.com/alibaba/nacos/issues/9332https://github.com/alibaba/nacos/issues/8492 我们遇到的 bug 简单一句话总结就是：集群方式部署的 nacos 其中一个节点重启后可能会有节点数据不一致的现象（服务注册与服务发现里面的服务数量不一致）比如说一个服务注册到了 nacos 中，我在 nacos 网页控制台 服务管理 服务列表 里查看有 10 个服务注册进来，刷新下网页可能就变成了 9 个，再刷新又变成 10 个，这种情况就是 nacos 的多个节点数据不同步了（nacos 配置中心数据是从 MySQL 取的，不受这个 bug 的影响），这种情况可以直接将 nacos 副本数设置成 1 临时解决，想要彻底解决我们验证了升级到 2.1.0 就能修复。 升级数据库表结构 nacos 官网文档写的太敷衍了，版本之间的差异需要自己找，哪怕你上个 flyway...