首页
学习
活动
专区
圈层
工具
发布
首页标签日志分析

#日志分析

500 行日志埋了 3 个故障,最阴的那个伪装成 WARN,AI 还是抓出来了

GavinGeng

前阵子排障,我把两千多行日志丢给一个现成的「智能分析」工具,它给我标了三百多行"疑似异常"。我硬着头皮翻了半小时,翻出来的全是缓存未命中、慢查询、重试成功——没...

2100

服务器变慢时,怎么确认是 AI 爬虫、先限哪一个、怎么限

用户10345225

直接回答:先去访问日志里按 UA 和 IP 统计请求量,找出占比最大的那一个;如果它集中在动态页面(首页、搜索页、分页、带参数的 URL)并且请求间隔很匀,基本...

3310

Docker 部署 ELK:轻松搭建开源日志检索与可视化平台

轩辕镜像

本文基于 docker.elastic.co/elasticsearch/elasticsearch:7.17.2,同栈 Logstash、Kibana 均为 ...

8810

robots.txt 拦得住 GPTBot 吗:AI 爬虫的约束边界、服务端兜底与日志验证

用户10345225

很多人配完 Disallow: / 就以为 AI 爬虫不来了,过一周翻日志发现 GPTBot 的请求一条没少。问题不在配置写错,而在于对 robots.txt ...

13710

别只看 robots.txt:从 nginx 与 CDN 日志里查出哪些 AI 爬虫真的抓过你的站

用户10345225

robots.txt 是一份「你对爬虫的声明」,它记录的是你希望发生什么,而不是发生过什么。要判断某个 AI 爬虫是否真的抓过你的站,唯一的证据是访问日志。

11210

ClickFix 攻击投递平台 ROMULUS 分析与防御

芦笛

中国互联网络信息中心 | 工程师 (已认证)

摘要:ClickFix 是一类利用受害者在浏览器中主动复制并执行命令来完成恶意代码落地的社交工程攻击手法,其诱饵以系统报错、安全验证等名义出现,诱导用户将命令粘...

10810

Docker日志太多难定位:用时间窗口对齐一次故障

用户12695357

假设用户反馈“14点22分接口报错”,打开 docker logs 却刷出大量内容。只截最后100行,可能错过故障;只搜 error,也可能混入其它请求。更稳妥...

11210

金融、互联网、AI 三行业日志平台迁移:ES 替换的路径结构与收益构成

SelectDB技术团队

摘要:日志与可观测平台的 Elasticsearch 替换,收益结构随行业不同而不同。金融场景以多源归一与并发治理为主:中信银行信用卡中心日志云平台从 ES 9...

17710

信创合规约束下的日志平台选型框架:架构、系统、认证、许可证与本地化支持的五维核对

SelectDB技术团队

摘要:面向政务、金融、央国企的日志平台国产化替代,选型结果主要取决于五个维度的核对结果:CPU 架构适配、操作系统适配、合规认证、许可证形态、本地化支持能力。 ...

20510

日志表 Schema 治理:固定字段 + VARIANT 兜底 + 高频子列物化的三层设计,以及变更窗口怎么排

野生数据人

【摘要】日志字段变更的麻烦,多数不是"改不动",而是"没有分层"——所有字段一律建成固定列,于是每次业务侧加一个 key 都要动一次表结构。我们做日志治理时把字...

11610

日志检索与聚合一体化架构:索引、容量与延迟规划方法

SelectDB技术团队

摘要:日志平台将检索、聚合和维表关联放在 Apache Doris 的同一条 SQL 链路中,可减少“检索出 ID—跨引擎回表—再次聚合”的数据搬运。Click...

13210

基于日志的监控告警:我们是怎么用一套轻量方案把线上问题"盯"住的

码农的日常

业务接口反馈慢,但从监控面板,CPU、内存、QPS 全都绿绿的,看不出哪里不对。最后查日志,发现某个下游服务调用耗时飙到了 5 秒,但因为它没报错,只是慢,所以...

14420

Adobe 安装报错 183 184 191:先看日志再动手

用户2002886

弹窗给的错误码信息量很低,「安装失败,错误 183」六个字什么都没说。真正的原因都在日志里——先看日志再动手,别上来就瞎试,我吃过这个亏。

14310

Agent 可观测数据在云上的存储与检索架构:冷热分层、对象存储与成本口径

SelectDB技术团队

摘要:Agent Trace 的数据特征与传统应用日志差异明显——单条记录体积极不均匀、JSON 路径持续漂移、检索与聚合要落在同一份数据上。在云上部署时,这三...

16810

ClickHouse 日志方案的能力边界:什么时候该考虑换引擎

SelectDB技术团队

ClickHouse 在日志场景的优势集中在写入吞吐与聚合性能,代价是并发能力与检索能力的取舍。

13610

安全监控与分析:从日志采集到威胁狩猎的工程化实践

用户12339161

安全监控与分析(Security Monitoring & Analysis)是 SOC 的核心能力。它不等于"堆 SIEM 买告警",而是一套采集 → 规范化...

13600

云上日志方案怎么选:Loki、ELK 与统一分析引擎的成本账与落地口径

SelectDB技术团队

日志方案的成本主要由两部分构成:索引开销与存储开销。Loki 把成本压在存储侧——只索引标签、正文压缩后进对象存储;ELK 把成本投在索引侧——全字段倒排。两者...

20810
领券