且炼时光
  • 首页
  • 归档
  • 分类
  • 标签

gitlab-ci-k8s-runner部署及缓存配置说明

因gitlab-ci的k8s-runner会将job里的每个stage都交由单独的pod来执行,导致默认的本地缓存无法使用。本文记录了基于k8s pv的gitlab-ci的缓存配置方案,无需使用S3分布式存储。并记录了gitlab-ci-k8s-runner相关的配置、部署步骤等。
2023-01-31
Kubernetes
#gitlab #ci

grafana第三方集成以及使用jwt(jwks)实现免登录访问

对于第三方集成grafana,需要可以通过链接直接访问管理界面,跳过登录页面。传统方法是使用代理认证,而最新的jwt方法可以更好地实现这个需求。不过网络上相关教程文档较少,缺乏详细说明,故此记录。
2022-11-05
大数据
#grafana

docker部署nfs服务器v3v4

虽然nfs-server的docker镜像有很多,但总有这样或那样的问题,容易踩坑。这里分享一下自己的使用记录。
2022-09-20
运维部署
#docker #nfs-server

我的服务器系列:tailscale使用自定义derper服务器(docker部署)

使用docker部署tailscale私有中继服务器,并使用nginx四层代理与原有服务共用443端口,最后配置使用并检测。derper-docker部署及使用较麻烦,本文分享踩坑记录及经验,建议阅读。 2023.10更新:随着网站备案注销,derper已切换到ip模式,增加对应示例及说明
2022-04-16
我的服务器系列
#tailscale #derper #docker #我的服务器系列

ubuntu获取离线安装包

工作经常会遇到需要离线安装软件的情况,特此记录下来,避免每次都得去翻笔记。
2022-04-09
运维部署
#ubuntu

PySpark自定义Transformer

使用python实现自定义Transformer以对pyspark的pipeline进行增强
2022-03-16
机器学习
#pyspark #transformer

PySpark学习笔记

pyspark使用笔记,含1.jupyter-docker环境搭建 2.dataframe2jdbc,jdbc2dataframe 3.模型训练及保存 4.模型导入及使用 等。
2022-03-16
机器学习
#笔记 #pyspark #jupyter

vbs实现wincc或mysql数据导出成csv

工作要求,需要编写vbs实现将wincc数据导出,估计以后也没机会再接触这门古董语言了,所以就记录一下。因为wincc用得太少了,测试中会使用mysql代替。
2022-01-19
后端开发
#vbs #wincc #mysql #csv

基于hdfs的ftp服务器的设计与实现

本文主要记录hdfs-ftp-server的设计思路、实现过程,使用的话直接看github项目文档即可。项目地址:https://github.com/linshenkx/hdfs-ftp-server
2022-01-17
后端开发
#ftp #hdfs

基于kube-prometheus的大数据平台监控系统设计

本文介绍了如何基于kube-prometheus设计一个监控系统, 以灵活简单的方式对kubernetes上的应用进行指标采集,并实现监控报警功能。本文提供了作者的应用示例,另外还记录了作者在学习、使用Prometheus过程中的一些笔记,如arm版镜像获取、一些工具的使用等。
2021-12-28
Kubernetes
#kubernetes #prometheus #bigdata
12345

搜索

韶华未褪,且炼时光
总访问量 次 总访客数 人