k8s环境日志采集方案是怎样的?
K8s环境日志采集方案主要包括以下几个步骤和要点：日志分类与收集：应用日志：容器中的应用日志通过Docker Daemon接收并重定向，以*json.log的形式保存在特定目录下。当数据量庞大时，可通过网络直接重定向至收集器，以提高数据流转效率。平台日志：包括Kubernetes系统自身的日志，同样需要被采集和管理。
在K8s环境下，针对Job容器的日志采集需要深入分析容器特点和业务需求，灵活选用或定制日志采集方案。ECI弹性容器产品采集方式因其弹性能力和低侵入性特性，已成为一种推荐实践。未来，日志采集技术的发展方向将聚焦于进一步优化容器发现速度、减少开始采集延时，以及简化配置流程，以提升用户体验和效率。
一种常见方法是借助logstash和filebeat。虽然这种方式较为成熟，但可能涉及较为复杂的环境配置和操作风险。对于追求简便操作的用户，自定义脚本成为更受欢迎的选择。使用kubectl命令，能够高效地在集群内检索特定pod的日志输出。
使用Logtail采集Kubernetes上挂载的NAS日志
使用Logtail采集Kubernetes上挂载的NAS日志，主要有SideCar模式和单独部署Deployment两种方式。SideCar模式：特点：灵活性高，适合处理大规模数据。实施方式：通过PV和PVC挂载NAS，然后在SLS控制台配置采集设置。字段信息包括Pod信息和日志路径。配置步骤：设置用户自定义标识，并创建相应的机器组进行管理。
步骤一： 部署Logtail容器 tips：步骤二： 配置机器组 如下图所示，在日志服务控制台创建一个Logtail的机器组，机器组选择自定义标识，可以动态适应POD ip地址的改变。
K8s 集群的准备步骤、生成mock数据的YAML文件、采集容器日志标准输出和文本文件、配置Logtail采集、设置字段索引与开启日志聚类、基本查询、日志聚类、上下文查询与LiveTail的使用等都进行了详细介绍。Ingress与审计方案的配置也包括了YAML文件示例与日志存储的说明。
阿里巴巴集团已大规模应用 SidecarSet 来管理 sidecar 容器，日志采集 Logtail sidecar 是一个使用示例。在性能和稳定性持续改进的同时，OpenKruise 未来版本将增加针对 Service Mesh 场景的支持。欢迎社区成员参与，共同建设一个面向规模化、复杂化、极致性能场景的 K8s 应用管理与交付扩展能力。
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。
k8s里面kubectlogs-f查看的是实时日志吗?
在Kubernetes（K8s）环境中，kubectl logs 命令用于查看容器的日志。其中，kubectl logs -f 参数用于查看容器的实时日志输出，而不需要使用-f标志则会显示最后一次的日志条目。当使用kubectl logs -f命令时，实际上是在监控容器的日志输出，类似于实时日志查看。
使用kubectl命令，能够高效地在集群内检索特定pod的日志输出。在跳板机上配置好所有集群的kubeconfig文件，借助kubectl logs命令，结合-f参数持续获取日志，并通过操作符将日志内容保存至本地文件，实现日志的实时收集。若需处理多个容器的日志收集任务，可以通过循环结构简化流程。
这些日志文件实际上是链接文件，指向 docker 容器的日志文件。通过查看这些链接，可以看到分别指向当前运行容器的日志和 pod 上次运行但已退出的容器日志文件。使用 logs 命令时，读取的是当前容器的日志文件；而当使用 –previous 参数时，则读取的是上次退出容器的日志文件。
跟踪查看容器的日志，相当于 tail -f 命令的结果（kubectl logs -f pod-name）学习 kubectl 的命令和操作，可以极大地提高在 Kubernetes 集群上的开发和运维效率。掌握这些技巧，对于理解和管理 Kubernetes 集群将大有裨益。
kubelet在实现previous时，将pod日志存储在/var/log/pods/podname目录下，且以链接文件形式与docker容器的日志文件关联。同时，它还保留上一个崩溃的容器的日志文件，并通过链接文件指向该文件。使用kubectl previous参数时，系统会读取这个链接文件中记录的日志，即为上次容器崩溃前的记录。
如果你想查看一个 pod 的具体日志，就可以通过 kubectl logs pod名 来查看。注意，这个只能查看 pod 的日志。通过添加 -f 参数可以持续查看日志。
Kubernetes日志查看指南:深入了解容器日志管理技术
1、查看单个容器日志：Kubernetes提供kubectl工具用于直接访问容器日志。使用命令获取指定容器日志，或配合`-f`选项实现实时追踪。 多个容器日志查看：一个Pod内多个容器时，此操作将输出Pod内所有容器的日志。 标签选择器过滤日志：通过标签选择器筛选特定标签的Pod或容器日志，仅显示所需信息。
2、docker logs -f my-container // 实时跟踪日志输出 使用Docker管理工具：如果你使用Docker管理工具（如Docker Compose、Kubernetes等），通常可以通过工具提供的命令或界面来查看容器的日志。
3、K8s 集群的准备步骤、生成mock数据的YAML文件、采集容器日志标准输出和文本文件、配置Logtail采集、设置字段索引与开启日志聚类、基本查询、日志聚类、上下文查询与LiveTail的使用等都进行了详细介绍。Ingress与审计方案的配置也包括了YAML文件示例与日志存储的说明。
4、如果日志信息不足以定位问题，可以尝试在Pod内部执行“sh”、“bash”或“ash”命令。进入容器内部进行详细检查，使用exit命令退出容器。查看集群级别事件：使用kubectl get events命令获取集群中事件的聚合视图。分析事件信息，了解Pod故障背后的资源状态变化，如节点故障、网络问题等。
5、日志库选择：考虑使用流行稳定版本的开源日志库，降低入坑风险。日志形态：在容器环境中，应将日志输出到 stdout 或 stderr，便于容器日志查看，但注意性能影响。日志落盘与传输：在 Kubernetes 中，考虑直接传输日志至后端系统，减少落盘与采集过程，提高性能。
Kubernetes常用命令汇总
kubectl 是操作 Kubernetes 集群取pod最近日志的命令行工具。其基本语法是取pod最近日志：kubectl [command] [Type] [NAME] [flags]。Type 可以是多种资源对象取pod最近日志，例如 pod、service、deployment、configmap 等。NAME 是要操作的具体对象名称。flags 用于添加额外的选项或参数。
kubectl run命令用于创建新的Pod。Pod是Kubernetes的基本工作单元，由一个或多个容器组成。使用kubectl run命令时，需要提供Pod的名称和容器的映像。例如：kubectl run my-app --image=my-image。对于需要指定容器启动命令的场景，可以使用--command参数。
配置和查看Kubernetes环境 使用kubectl config view获取当前配置详情。 使用kubectl config set命令调整配置设置。 使用kubectl get nodes o wide列出所有节点及其详细信息。 管理Pod和Service 使用kubectl get pods查看当前Pod。
