随笔记录
-
智能运维系列（十一）| 日志文本异常聚类及相似度检测
互联网公司在实际运营过程中，所维护的各项业务随时可能会遇到各种各样的问题，将各系统的运行日志记录在文件中，从而方便排查和定位问题，是目前普遍采用的做法。 但是，在实际应用过程中，日志中有用的信息隐藏在…
-
智能运维系列（十）| 浅析根因告警的系统分析法
原始证据收集 收集原始证据是根因告警分析的第一步。异常事件发生时，系统立即启动证据收集任务，从告警列表中搜集异常开始前一段时间内(当前为 5 分钟)的记录，以保证告警与异常有充分的时间相关性。此外，为了降…
-
智能运维系列（九）| 基于交易树的根因告警定位方法
“告警定位”简简单单四个字，想要做好却不是一件容易的事情。每一条告警，都会包含相应的告警级别（根据程度分为 critical, major, minor, warning），告警类型（根据告警源分为网络告警，专线告警，主机告警，TDSQL…
-
Python爬虫项目整理
WechatSogou [1]- 微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口，可以扩展成基于搜狗搜索的爬虫，返回结果是列表，每一项均是公众号具体信息字典。 DouBanSpider [2]- 豆瓣读书爬虫。可以爬下豆瓣读书标…
-
智能运维系列（八）| 事件指纹库：构建异常案例的“博物馆”
历史事件对比流程 当前智能运维中的根因定位大多从某一个具体和方面入手去推断异常，如日志的根因定位，未能做到宏观的比较。然而，现实中的异常需要分析的维度非常广，包括且不限于告警、接口指标曲线、日志、应用…
-
LSTM模型结构讲解
人类并不是每时每刻都从一片空白的大脑开始他们的思考。在你阅读这篇文章时候，你都是基于自己已经拥有的对先前所见词的理解来推断当前词的真实含义。我们不会将所有的东西都全部丢弃，然后用空白的大脑进行思考。…
-
CNN，RNN，LSTM都是什么？
CNN，RNN，LSTM都是什么？ 卷积神经网络（Convolutional Neural Network, CNN） CNN 是一种前馈神经网络，通常由一个或多个卷积层（Convolutional Layer）和全连接层（Fully Connected Layer，对应经典的 NN）组成…
-
【深度学习篇】—CNN和RNN结合与对比，实例讲解
一、前述 CNN和RNN几乎占据着深度学习的半壁江山，所以本文将着重讲解CNN+RNN的各种组合方式，以及CNN和RNN的对比。 二、CNN与RNN对比 1.CNN卷积神经网络与RNN递归神经网络直观图： 2.相同点：2.1. 传统神经网络的…
-
智能运维系列（七）| 化繁为简：业务异常的根因定位方法概述
根因定位分析（RCA）是智能化运维(AIOPS)一个重要且难于实现的领域，涉及到归纳分析和演绎推理的相互结合，是从大数定理到逻辑性完备链条推理的综合应用。分布式架构的海量数据为相关分析奠定了基础，但业务异常案…
-
智能运维系列（六）| 如何通过智能化手段将运维管理要求落地？
保障业务的稳定运营一直是 IT 运维人员的首要任务。为了实现这一目标，微众银行正式启动了”异常事件根因分析 (RCA) 项目”。经过包括运维人员在内的多个角色的共同努力，最终该项目取得较为理想的效果。作为一线运维…
