有同学咨询,在使用Elasticsearch时,出现WARN提示信息的,如何解决这个问题?如果不影响使用的话,是否可以隐藏掉这个警告信息呢?
警告信息如下:
[WARN][org.elasticsearch.entitlement.runtime.policy.PolicyManager.repository-s3.ALL-UNNAMED.software.amazon.awssdk.profiles] [localhost] Not entitled: component [repository-s3], module [ALL-UNNAMED], class [class software.amazon.awssdk.profiles.ProfileFileLocation], entitlement [file], operation [read], path /home/<acct>/.aws/credentials
org.elasticsearch.entitlement.runtime.api.NotEntitledException: component [repository-s3], module [ALL-UNNAMED], class [class software.amazon.awssdk.profiles.ProfileFileLocation], entitlement [file], operation [read], path /home/<acct>/.aws/credentials故障分析
经过丁老师分析,这个警告信息是Elasticsearch的权限管控(Entitlement)机制阻止了S3仓库插件读取亚马逊AWS凭证文件,原因是当ES检测到repository-s3组件后尝试读取 /home/<acct>/.aws/credentials 文件,但未授予文件读取权限,导致抛出NotEntitledException。由于Elasticsearch从8.x版本开始引入了Entitlement(权限授权) 机制,用于严格管控内置和第三方组件对系统资源的访问,目的是提升安全性。
问题解决
该故障有4种解决方式,具体如下:
解决方式一:通过ES配置放行S3凭证文件读取权限(推荐)
修改Elasticsearch的配置文件(elasticsearch.yml),授予repository-s3组件读取AWS凭证文件的权限:
# 1.放行repository-s3读取.aws/credentials文件的权限
entitlement:
repository-s3:
file:
read:
paths:
- "/home/<acct>/.aws/credentials" #替换为你的实际凭证文件路径
- "/home/<acct>/.aws/config" #可选:若用到 config 文件也放行
# 2.确保S3仓库插件已启用
plugin.mandatory: repository-s3修改后重启Elasticsearch即可。
解决方式二:将AWS凭证配置到ES的S3仓库中,绕过文件读取
如果不想修改ES权限配置,可在创建S3仓库时指定AWS 凭证,避开文件读取权限问题:
#通过ES API创建S3仓库(替换为你的实际信息)
PUT /_snapshot/my_s3_repository
{
"type": "s3",
"settings": {
"bucket": "your-s3-bucket-name", #你的S3桶名
"region": "us-east-1", # 你的S3区域
"access_key": "your-aws-access-key", #AWS AccessKey
"secret_key": "your-aws-secret-key", #AWS SecretKey
"base_path": "es-backups" #可选:S3中的备份路径
}
}注意:这种方式会将AWS凭证明文存储在ES配置中,生产环境需配合ES的加密功能,避免凭证泄露。
解决方式三:使用IAM角色,无凭证文件,适合云环境
如果ES部署在亚马逊AWS EC2/EKS等云环境中,可给ES的实例绑定IAM角色,这样repository-s3插件会自动通过IAM角色获取权限,无需读取~/.aws/credentials 文件,从根源避免权限问题
实现方式:
1.在AWS IAM中创建角色,添加S3访问权限;
2.将角色绑定到ES所在的EC2实例/EKS Pod;
3.创建S3仓库时不指定access_key/secret_key,ES会自动使用IAM角色:
PUT /_snapshot/my_s3_repository
{
"type": "s3",
"settings": {
"bucket": "your-s3-bucket-name",
"region": "us-east-1",
"base_path": "es-backups",
"role_arn": "arn:aws:iam::123456789012:role/ES-S3-Access-Role"# 你的IAM角色ARN
}
}解决方式四:彻底隐藏WARN信息
在modules/repository-s3/src/main/config/log4j2.properties中设置
logger.entitlements_repository_s3.name = org.elasticsearch.entitlement.runtime.policy.PolicyManager.repository-s3.ALL-UNNAMED
logger.entitlements_repository_s3.level = error就会隐藏该WARN信息,不影响基本功能的使用。
在使用jet brains的ide开发代码时,经常性的会输入单引号或双引号,ide默认有对于引号的自动完成功能,即输入一个引号,自动显示两个,这一点其实做的很不智能,因为在使用时经常会有显示出3个的情况,那么怎么关闭这个功能呢?file...
最近有同学提问,在开发的软件项目中,用户上传的文件名中包含空格,导致用户点击下载时,提示找不到该文件,404的错误,这种问题怎么解决呢?首先,引起这种问题的原因就是文件名中有空格,导致了下载的url无法形成完成的链接。我分别做了两个下载...
适用于ecshop的微信文章采集插件包
在使用android studio打包app时,需要制作JKS证书,具体的命令如下:D:\Program Files\Java\jre1.8.0_301\bin keytool -genkey -v -keystore dlq6.jks...
videojs是一款非常不错的html video播放器插件,很多同学经常在群里问我,说丁老师这个videojs怎么设置为宽度或者高度自适应呢,不想把video的width和height写死,有没有什么办法呢。丁老师经过研究发现啊,vide...
有同学反应,在使用photoshop时,忽然文件打不开了,先后试了下psd格式、jpg格式、png格式的,等等等等,全都打不开,重启了电脑也不行,这是怎么回事呢?经过丁老师研究后发现,这是因为安装的是非正版photoshop,在使用时,没有...
pdf添加水印,可以使用专业的pdf工具,如Adobe Acrobat、福昕PDF阅读器等,支持文字和图片形式的添加水印,支持透明度设置、水印位置设置等。图片添加水印,可以使用photoshop软件,但是photoshop太大了,而且使用起...
微信小程序自2023年8月起,开始对《手机号快速验证组件》进行收费,每个小程序有1000次的免费额度,超过额度就要收费。说白了就是以后在使用微信小程序获取用户手机(用户主动授权)的时候,需要按次数收费了。那么,在当前的经济状况下,如何做到轻...