Apache Flume（4）：日志文件监控
1 案例说明 企业中应用程序部署后会将日志写入到文件中，可以使用Flume从各个日志文件将日志收集到日志中心以便于查找和分析。 2 使用Exec Soucre Exec Source Exec Source通过指定命令监控文件的变化，加粗属性为必须设置的。 添加配置文件exec-log.conf # 定义agent名称为a1# 设置3个组件的名称a1.sources = r1a1.sinks = k...
postgresql-effective_cache_size参数详解
在 PostgreSQL 中，effective_cache_size 是一个配置参数，用于告诉查询规划器关于系统中可用缓存的估计信息。这个参数并不表示实际的内存量，而是用于告诉 PostgreSQL 查询规划器系统中可用的磁盘缓存和操作系统级别的文件系统缓存的大小。它用于帮助 PostgreSQL 优化器估计特定查询所需的成本，以选择最佳的查询计划。 effective_cache_size 参数的设...
使用 Apache Kafka 进行实时流处理
Apache Kafka 是一个开源分布式流处理平台，最初由 LinkedIn 开发，后来于 2011 年捐赠给 Apache。 我们可以将 Kafka 描述为一个文件集合，其中充满了分布在多台机器上的消息。大多数 Kafka 类比都围绕着将这些不同的单独日志捆绑在一起、将消息从生产者可靠地路由到消费者、进行复制以实现容错以及优雅地处理故障。其架构更多地继承了 HDFS、HBase 或 Cassandra...
Spring Boot 3 整合 Spring Cache 与 Redis 缓存实战
目录 什么是 Spring Cache？Spring Cache 常用 API@Cacheable@CacheEvict@CachePut@Caching Spring Boot 整合 Spring Cache (Redis 缓存)项目依赖 pom.xml项目配置 application.yml自动装配配置类 RedisCacheConfig Spring Boot 路由缓存实战获取路由数据缓存更新路由...
Kotlin+Apache HttpClient+代理服务器=高效的eBay图片爬虫
引入 你是否想过用Kotlin来编写爬虫程序？你是否想过用Apache HttpClient来处理HTTP请求和响应？你是否想过用代理服务器来绕过反爬措施？如果你的答案是肯定的，那么本文将为你介绍一种高效的eBay图片爬虫的实现方式，让你可以用Kotlin+Apache HttpClient+代理服务器的组合来轻松地下载eBay的图片。 背景介绍 Kotlin是一种基于JVM的静态类型编程语言，它具有简...
APISIX proxy-cache 插件用法
APISIX 的 proxy-cache 插件可以对上游的查询进行缓存，这样就不需要上游的应用服务自己实现缓存了，或者也能少实现一部分缓存，通用的交给插件来做。下面的操作都是基于 APISIX 3.2 版本进行配置，关于 proxy-cache 的详细配置的可以参考文档：https://apisix.apache.org/docs/apisix/3.2/plugins/proxy-cache/ 不过文档...
中间件安全： Apache 远程代码执行 （CVE-2021-42013）
中间件安全： Apache 远程代码执行 （CVE-2021-42013） Apache HTTP Server是美国阿帕奇（Apache）基金会的一款开源网页服务器。该服务器具有快速、可靠且可通过简单的API进行扩充的特点，发现 Apache HTTP Server 2.4.50 中针对 CVE-2021-41773 的修复不够充分。攻击者可以使用路径遍历攻击将 URL 映射到由类似别名的指令配置的目录...
【Liunx】部署WEB服务:Apache
【Liunx】部署WEB服务:Apache 概述Apache1.介绍2.Apache文件路径3.Apache详解(1)安装Apache(2)启动Apache(3)配置文件a.Apache主配置文件：vim /etc/httpd/conf/httpd.conf信息：b.基于主机头的虚拟主机 (4)开始演示：a.新建两个网站根目录b.分别在两个网站根目录新建两个index.htmlc. 新建虚拟机的配置文件...
vue运行报错cache-loader
如果你在运行 Vue 项目时遇到了与 cache-loader 相关的错误，通常可以通过以下步骤解决： 1. 清除 npm 缓存： 运行以下命令清除 npm 缓存： npm cache clean --force 2. 删除 node_modules 目录： rm -rf node_modules 或者在 Windows 上使用： rmdir /s /q node_modules 3. 重新安装依赖： ...
Apache Spark 的基本概念和在大数据分析中的应用
Apache Spark 是一个基于内存的分布式计算框架，旨在处理大规模数据集。它通过提供高效的数据处理和分析功能，帮助用户快速处理大量数据，并提供实时和批量数据处理。在本文中，我们将探讨 Apache Spark 的基本概念以及在大数据分析中的应用。 Apache Spark 的基本概念 在介绍 Apache Spark 的基本概念之前，我们先来了解一下分布式计算的概念。分布式计算是指将计算任务分散到多...