llussy

人生中有些事你不竭尽所能去做,你永远不知道你自己有多出色。

terminology

[TOC] 扁平化扁平化概念的核心意义是：去除冗余、厚重和繁杂的装饰效果。东西流量场景是数据中心网络，东西向流量是数据中心内部机器之间流量，南北向是数据中心内部机器和数据中心外（互联网）的流量。临界资源多道程序系统中存在许多进程，它们共享各种资源，然而有很多资源一次只能供一个进程使用。一次仅允许一个进程使用的资源称为临界资源。许多物理设备都属于临界资源，如输入机、打印机...

Posted by llussy on August 14, 2019

Dockerfile中CMD和ENTRYPOINT

主要参考sparkdev 地址 CMD 和 ENTRYPOINT 指令都是用来指定容器启动时运行的命令。 Docker 的 stop 和 kill 命令都是用来向容器发送信号的。注意，只有容器中的 1 号进程能够收到信号，这一点非常关键！ stop 命令会首先发送 SIGTERM 信号，并等待应用优雅的结束。如果发现应用没有结束(用户可以指定等待的时间k8s 默认等待30s)，...

Posted by llussy on August 14, 2019

Kubernetes 日志收集

[TOC] 日志流： filebeat –> kafka–> logstash–>es k8s应用日志输出到标准输出，最好是json格式日志。 filebeat 关键配置 output.kafka topic: 'k8s-%{[kubernetes.namespace]}' 按照ns打入topic filebeat 传输meta信息落盘。 pod /u...

Posted by llussy on July 8, 2019

HBase shell 命令介绍

转自纯洁的微笑原文地址 HBase shell是HBase的一套命令行工具，类似传统数据中的sql概念，可以使用shell命令来查询HBase中数据的详细情况。安装完HBase之后，如果配置了HBase的环境变量，只要在shell中执行hbase shell就可以进入命令行界面，HBase的搭建可以参考我的上一篇文章：hbase分布式集群搭建 HBase介绍 HBase...

Posted by llussy on July 2, 2019

elasticsearch常用操作

[TOC] 常用命令查看node信息 curl -XGET 'http://ip:9200/_cat/nodes?pretty' 查看集群中的master curl -XGET 'http://ip:9200/_cat/master?v' 创建删除索引 # 创建 curl -XPUT 'http://ip:9200/imcplog-2017-01-01' curl -XP...

Posted by llussy on June 22, 2019

elasticsearch6.x部署

[TOC] 一、主节点、副节点、分片与复制分片关系 1、master主节点集群中用于元数据(metadata)的请求处理，比如确定分片位置，索引的新增、删除请求分配等 2、node节点包括client node和 data node client node node.master=flase,node.data=false 用于转发请求，起到平衡负载的作用 dat...

Posted by llussy on June 22, 2019

prometheus-operator

[TOC] Prometheus的基本架构 Prometheus是一个开源的完整监控解决方案，涵盖数据采集、查询、告警、展示整个监控流程，下图是Prometheus的架构图： Prometheus Server Prometheus Server是Prometheus组件中的核心部分，负责实现对监控数据的获取，存储以及查询。 Prometheus Server可以通过静态...

Posted by llussy on April 21, 2019

hdfs 丢失块处理

dfs使用状况 hdfs dfsadmin -report 查看是否有丢失块 hdfs fsck / #过滤损失块 hdfs fsck / | egrep -v '^\.+$' | grep -v replica | grep -v Replica #删除丢失块 hdfs fsck / -delete (注意路径) 查看文件详情 hdfs fsck /path/to/cor...

Posted by llussy on April 18, 2019

kubernetes delete namespace

kubernetes delete namespace 处于 Terminating状态 # kubectl get ns prometheus Active 33d redis Active 7d5h redis-ha Termina...

Posted by llussy on April 13, 2019

CentOS7利用systemctl添加自定义系统服务

CentOS7的服务systemctl脚本存放在:/usr/lib/systemd/,有系统（system）和用户（user）之分,需要开机不登陆就能运行的程序，存在系统服务里，即：/usr/lib/systemd/system目录下. CentOS7的每一个服务以.service结尾，权限为754 一般会分为3部分：[Unit]、[Service]和[Install] [...

Posted by llussy on February 2, 2019