首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

腾讯云中间件产品月报(2021年第1期)| 文末好礼送不停

消息队列 CKafka 专业版支持区部署;标准版S2上线。 分布式事务 DTF 支持兼容 Spring Cloud F 版本;针对私有化部署场景,协调器节点优化性能。...# 高可用容灾 基于多个可用区域进行部署、提供定时健康探测、服务异常自动恢复等监控功能,实现高可用容灾,保障用户服务持续、稳定、安全运行。...新增资源时可手动关联数据集,避免主账号二次授权给子账号,减少操作成本。...# 服务告警优化 优化配置告警维度,支持4xx 5xx等状态码的告警设置。 # 容器集群导入云主机、安全组配置优化 支持创建集群时填写数据盘挂载地址。...集赞 赢礼品 公众号留言告诉我们本期月报中你最 pick 的亮点 留言点赞靠前的小伙伴将获得以下礼品 点赞第1名:定制充电宝一个 点赞第2-5名:鹅厂经典公仔一只 往期 推荐 扫描下方二维码关注本公众号

1K30

大数据运维三十六计

第十六计:实时计算重要业务要通过链路灾备保证业务稳定性。 第十七计:大规模计算平台至少要能容忍单机故障,否则别让它上线。...他接起来,静静地听电话那头生硬的电脑语音播报:“异常告警,监控项disk_full状态critical,水位超过了90%,详情查看****。”...小明查看了整个集群的存储水位,分析了增长趋势,查看了TOP N目录,整体看下来没有发现当前突发的异常事件。...这时告警电话铃声再次响起,小明想到即使从HDFS直接删除,还会先进回收站,报警依然会持续。先删除,再清理回收站?...一般不推荐使用复制/粘贴命令,如果要用,一定要注意是否有空格和换行,默认在命令行先敲个#再粘贴。 流程和规范都是历史经验的总结,千万不能为了少敲几个命令而偷懒。

2.7K40
您找到你想要的搜索结果了吗?
是的
没有找到

10分钟搭建MySQL Binlog分析+可视化方案

接下来我们将演示如何在10分钟内手把手完成从 binlog 采集到查询、告警、搭建报表等全过程,满足各个老板们的需求: MySQL Binlog 采集 关键字段索引+统计设置 对异常账号进行查询分析...对异常登录进行告警 配置可视化仪表盘 对历史登录信息备份以备数据审计 环境准备 数据库 MySQL 类型数据库(使用 MySQL 协议,例如 RDS、DRDS 等),数据库开启 binlog...这里我们推荐使用方案 2+logtail binlog 采集组成最优的方案3:用户最近一次登录信息依然保存在数据库中,通过 logtail 的 binlog 功能采集 user_login 表,logtail...异常登录告警 异常登录都会有误判的可能性,因此正常情况下会有少部分异常登录的情况,但异常登录占比要小于1%。这里我们为用户登录设置一个异常登录的告警:若当异常登录占总登录的1%则触发告警。...告警设置参见日志服务告警设置 ? 数据备份 用户登录数据,一般建议在日志服务存储一段时间(30天、半年、1年等)用于实时的查询和分析,但对于历史数据还需要保存下来,便于后续的审计、大数据挖掘与分析等。

2.1K30

网络攻防对抗之“左右互搏术”

SEIM(安全信息和事件管理系统):Elastic ELK Docker虚拟机推荐分配12GB内存。...例如,通过监控单个或所有主机Sysmon EventID的走势图,也是可以发现攻击异常。...如果两条规则产生的告警同时出现,更充分说明正在发生PTH和DCsync攻击,如下图所示。 ATT&CK T1136.001创建账号 红队在攻击Linux系统后,有可能会创建账号。...网络攻防对抗就像猫鼠游戏,蓝队需要持续跟踪了解掌握常见攻击技术,根据自身业务安全场景需要,通过持续优化安全系统告警规则,结合网络安全有效性验证及红蓝对抗实战化检验,及时检测发现深层次网络攻击行为和异常。...analytics/by_technique https://github.com/12306Bro/Threathunting-book https://lolbas-project.github.io/ 精彩推荐

1.3K30

生产环境中的面试问题,实时链路中的Kafka数据发现某字段值错误,怎么办?

提前做好资源保障、任务优化等措施; 设置延时基线,通过优化程序代码、资源、解决倾斜与反压等问题,使其控制在基线内; 指标监控,监控任务FailOver情况、CheckPoint指标、GC情况、作业反压等,出现异常告警...例如: 数据源层原始数据包含不同联盟的点击数据,那么数据处理层过滤掉不需要的联盟点击数据,并将目标联盟的点击数据根据媒体和创意信息补齐当前点击所属的账号、计划、单元; 业务层根据媒体,账号、计划、单元不同维度计算出对应的点击总量...任务分级 制定保障等级,从任务影响面大小、数据使用方来划分,一般情况公司层面优先于部门层面,外部使用优先于内部使用,高优先级任务需要优先/及时响应、必要情况下做链路保障机制。...做好指标监控 指标监控,监控任务failover情况、checkpoint指标、GC情况、作业反压等,出现异常告警。...高可用HA 整个实时Pipeline链路都应该选取高可用组件,确保理论上整体高可用;在数据关键链路上支持数据备份和重放机制;在业务关键链路上支持跑融合机制 监控预警 集群设施层面,物理管道层面,数据逻辑层面的多方面监控预警能力

27820

数据安全实践之数据安全日志审计平台

)】单账号访问单个接口大于【50】条日志 (3)数据量纬度:往往会发现一些对数据控制不严的接口 单个账号对某一数据接口累计获取去重后敏感数据大于【1000】条 (4)时间窗口:基于统计和平均值的告警,发现突发的异常行为的常用规则...3.告警信息查看 (1)告警事件信息与检索 基本包含的要素,可自行发挥:时间,账号,userIP,规则名称,访问系统,url,访问类型,匹配多少条日志,详情 检索信息:时间段,账号,IP,规则名称,访问系统...新增url接入检测,加入系统列表清单:系统名,业务线,url,加入时间,日访问量, 日志告警丢失,某个url连续【10】日没有日志告警:URL上线,下线手动添加/清除功能 异常日志告警异常日志打标后,...存储异常日志库,分析异常原因,安全告警应排除这类日志,会产生误报。...2.员工数据泄露事件取证与事件还原 系统接口的安全日志告警与DLP告警关联: 时间维度:在同一个时间段内,有前后关联的事件 人员维度:相同账号,相同IP,同部门,同岗位账号等 事件维度:相似的异常行为,

5.1K10

全链路压测(12):生产压测必不可少的环节

前言 全链路压测系列到这里,已经是第十二篇文章了,整个系列大概有14篇的样子,预计这个月会更新完毕。...生产压测会暴露很多问题,下面列举一些常见问题: 数据准备不足和数据预热问题; 各团队资源投入度和信息同步问题; 基础的技术平台支撑问题(快速发布、紧急扩容、监控告警); 前期的技术准备和梳理不足(如链路依赖及限流降级熔断措施...类似11这种大型的业务营销活动,预案也会分前置预案和活动预案以及紧急预案。...因为技术方面的监控,除了及时的告警通知之外,监控的及时性和准确性以及噪音,有时候会影响我们判断。这个时候业务监控大盘的作用就体现了出来。...业务监控大盘的目的在于:无论技术侧是否发现了问题,只要业务指标的变化数据存在异常,就需要及时介入观察。 如上就是生产压测比较重要的一些环节要做的事情以及注意事项。

1.8K20

云监控最佳实践:自定义监控云数据库MySQL指标

如何监控云数据库MySQL连接数等运行状态指标 推荐您使用 云监控-自定义监控 ! 目前内测阶段免费使用,无需审核,开通服务即用。诚邀您点击 申请页面 参与内测体验!...配置告警 场景:定期监控云数据库 MySQL 异常连接数,当异常连接次数大于0时发送短信告警。 1. 确认用户消息通道已验证,可在 CAM 鉴权 页面查看验证情况。 image.png 2....如图示例为:云数据库 MySQL 异常连接数大于0时发送短信告警,持续一个统计周期(1分钟),每5分钟告警一次。...image.png 接收告警 如果云数据库 MySQL 异常连接数大于0,5分钟后将会收到短信告警,短信内容如下: 【腾讯云】云监控自定义监控指标告警触发 账号 ID:34xxxxxxxx,昵称:自定义监控...告警详情 告警内容:指标视图 | 云数据库 MySQL 异常连接数大于0 告警对象:Aborted_connects 当前数据:1 APPID:125xxxxxxx 告警策略:视图告警 触发事件:2019

2.7K40

如何基于ELK构建实时告警系统,保障你的系统稳定性

但是,当您的系统发生异常情况时,如何及时获得通知呢?这就需要一个实时的告警框架了。本文将介绍基于 Elasticsearch 的实时告警框架,并推荐一个强大的工具:Frostmourne。...Elasticsearch 告警框架简介 Elasticsearch 告警框架是一个基于 Elasticsearch 的实时告警框架,它可以帮助您监控 Elasticsearch 索引中的数据,并在满足预定义条件时发送告警通知...Elasticsearch 告警框架从 Elasticsearch 中获取数据,并根据用户定义的规则发送告警通知。...自带账号,团队,部门信息管理模块,也可自己实现内部对接 集成LDAP登录认证 权限控制,数据隔离,各团队互不影响 Elasticsearch 告警框架是一个非常重要的工具,它可以帮助您实现实时监控和快速响应异常情况...Frostmourne是一个强大的工具,它具有灵活的条件定义、多种告警通知方式和高可用性,可以满足您的各种告警需求。

77120

APP测试工程师“养成”记(三)

真机的安装,卸载 2.第三方软件协助安装/卸载 3.模拟器上的安装/卸载 三、升级安装实用性 1.在线升级 2.渠道升级 3.商店升级 四、业务功能 1.业务逻辑 2.功能点 3.关联性 五、稳定/异常性...1.交互 2.异常 3.压力 4.遍历 5.固定路径压测 六、性能 1.基准性能 2.大数据 七、接口测试 1.场景测试 2.接口用例测试; 八、界面易用性 1.界面交互; 2.可用性 九、适配性...6.不同尺寸 十、平台兼容 1.阿里MQC 2.百度MTC 3.腾讯wetest 4.Testin 十一、专项测试 1.启动 2.流量 3.电量 4.GPU 5.CPU 6.内存 7.fps 十二...、权限 1.不同系统 2.不同品牌 十三、安全性 1.腾讯金刚网 2.apk反编译 3.敏感信息泄漏 4.文件夹权限 5.xss注入 6.账号安全 十四、数据安全 1.360/猎豹数据清除 2.不同安全软件对...apk包检测 十五、手机特性 1.刷卡待 2.多语言 十六、竞品对比 十七、测试常遗漏测试点 十八、建立良好的用户反馈渠道及提炼测试点 以上就是整体关于APP测试工程师,需要掌握的以及要学习的

1.6K10

分布式云场景下的多集群监控方案最佳实践

这种跨云厂商跨账号的 Kubernetes 集群场景,需要实现统一的监控、数据聚合查询、告警以及可视化的能力。...自监控系统与自动恢复机制,支持组件异常后的重新拉起,不可用采集分片上的 Targets 自动转移能力。...公网采集可以解决 TMP 实例所在 VPC 网络与目标集群网络不通的场景,但是弊端也很明显,网络质量无法保证,可能会出现偶尔的数据掉点,所以我们比较推荐使用云联网或专线等方式采集网络不通的集群。...单集群告警 当前策略演示的是单集群监控中 pod 状态异常持续时间为两分钟的时候,发出告警: 模拟触发告警:将集群中 test-nginx 的镜像 tag 改为一个不存在的 tag,这时 pod 会处于...多集群的统一告警 当前策略演示的是多集群中只要有 pod 状态异常总数大于3且持续时间为两分钟的时候,就发出告警: 在另外一个集群中创建个 test-nginx-1,让其副本数为3并且处于 pending

1.9K30

网站安全公司 渗透测试流程漏洞信息文章

快到十二月中旬了,很多渗透测试中的客户想要知道如何搜集这些漏洞信息和利用方式的检测,再次我们Sine安全的工程师给大家普及下如何发现漏洞以及如何去获取这些有用的信息来防护自身的网站项目平台安全,把网站安全风险降到最低...常见风险 会员 撞库盗号 账号分享 批量注册 视频 盗播盗看 广告屏蔽 刷量作弊 活动 薅羊毛 直播 挂站人气 恶意图文 电商 恶意下单 订单欺诈 支付 洗钱 恶意下单 恶意提现 其他 钓鱼邮件 恶意爆破...网络设备 及时检查系统版本号 敏感服务设置访问IP/MAC白名单 开启权限分级控制 关闭不必要的服务 打开操作日志 配置异常告警 关闭ICMP回应 6.5.2. 操作系统 6.5.2.1....Windows 异常进程监控 异常启动项监控 异常服务监控 配置系统日志 用户账户 设置口令有效期 设置口令强度限制 设置口令重试次数 安装EMET 启用PowerShell日志 限制以下敏感文件的下载和执行...对这种情况,通常会基于虚拟文件系统和注册表的信息、内存分配特征、硬件特征、特殊指令等来识别,如果对渗透测试有需求的朋友可以去问问专业的网站安全维护公司来预防新项目上线所产生的安全问题,国内做的比较好的公司推荐

1.4K30

运维安全中的“福尔摩斯”

其实,我们的一些客户在使用堡垒机的过程中,可能也会碰到类似的事件,并且都通过堡垒机找到了相关的作案人员,下面我们分享三个发生过的案例 案例一 误操作导致主机异常 某政务网客户发现其内部一台重要服务器上出现异常报警...根据客户提供的服务器history日志相关信息,可以看到有人对该服务器keepalived的操作记录存在异常。...风险警示 对重要、高危、敏感的指令预先定义好命令控制策略,可以设置阻断、告警等行为,一旦触发策略就自动通知管理员。...通过会话日志反查操作用户,最终找到该行为的操作人员李某,其也承认是自己一时利益熏心,想利用运维账号窃取客户信息进行售卖。...网络安全专家建议 细化运维人员与主机授权关系 开启因子认证,提高身份可靠性 重要服务器启用二次会话审批 重要命令,高危命令进行审批及限制 重要数据服务器,限制文件的上传下载 - END -

1.5K70

抵御“内鬼”! 腾讯安全中心集成UEBA能力解决内部安全威胁

而在传统的防御体系下,由于缺乏对内网异常行为的感知,导致攻击者进入内网之后就防御失效,全程无感知,从而有可能为企业带来不可估计的损失。UEBA旨在解决内部设备或账号被控之后,对风险的检测和监控问题。...它主张从账号和设备的风险行为出发,通过对内网横向移动的检测,最终达到及早防范数据泄露的效果。...02 六大产品优势,打造内部威胁告警利器 UEBA用户实体行为分析,集中关注账号异常、设备异常、横向移动和数据安全四个安全场景,自建规则分析引擎、画像检测引擎、机器学习检测引擎对全网海量安全告警数据进行快速分析...二者结合将用户、账号、资产和应用上发生的各类异常和活动,以发生时间的先后关系串联成一条时间线,做持续的用户与实体异常行为检测。 ?...腾讯UEBA可以记录、分析此类帐号异常情况,并根据该帐号的可疑行为进行分析并及时告警

2.7K40

大国点名,监控护航

云监控是将指标、事件等类型的数据采集后,通过对数据的处理,可视化的展示给用户,并且在发生异常时,及时通知用户。...云监控以监控中台(数据处理加工)、业务告警告警配置)和 Dashboard(业务大屏)为一体,让客户只需腾讯云账号,即可完成全面的监控需求。...:客户通过云监控告警策略可自助订阅关心的云产品事件信息以及核心指标的异常信息; 角色参与:腾讯云支持子账号方式管理账号权限,因此,可对不同账号用户给予不同的云监控使用权限; 云监控在使用场景允许情况下支持自助数据消费...护航现场大屏 接入云监控的基础数据和业务自定义数据不仅可做大屏,相同数据源还可用于配置不同场景需求的告警策略,及时发现线上服务中发生的各种性能或业务异常问题。 ? 告警规则列表 ?...合理的使用云监控完成了七人普的监控护航,通过异常告警的接收,及时发现并处理了活动中的问题。

1.9K30

自动化运维平台Spug测试

初始化管理员账号admin,密码为spug.dev 2.登陆 http://172.27.34.51/ 三、工作台 工作台是一个概览,包含应用、主机任务、监控和报警等信息。...建群,选中群,添加群机器人 创建一个机器人 复制webhook地址 3.报警联系人组 告警是以组的方式发送的,新建告警组test_team,将告警联系人loong576加入改组。...提交后等待检测 发现8808端口检测异常 2.1 微信告警 2.2 钉钉告警 2.3 邮件告警 2.4 企业微信告警 3....自定义告警的原理:通过脚本判断监控项,脚本执行退出状态码为 0 则判定为正常,其他为异常。...通过 十二、其它问题 1.root无法直接登录问题 1.1 问题说明 由于root用户禁止直接登录,新建主机时登录用户不能设置为root,否则会报错,此时如果需要执行需要root权限的命令时,需要加sudo

2.6K00

自动化运维平台Spug测试

初始化管理员账号admin,密码为spug.dev 2.登陆 http://172.27.34.51 ? 三、工作台 ? 工作台是一个概览,包含应用、主机任务、监控和报警等信息。...告警是以组的方式发送的,新建告警组test_team,将告警联系人loong576加入改组。 ? 十、监控中心 1.监控中心概览 ? 监控方式有四种:站点监控、端口监控、站点监控和自定义监控。...发现8808端口检测异常 2.1 微信告警 ? 2.2 钉钉告警 ? 2.3 邮件告警 ? ? 2.4 企业微信告警 ? 3....自定义告警的原理:通过脚本判断监控项,脚本执行退出状态码为 0 则判定为正常,其他为异常。 3.1 报警信息 微信: ? 钉钉: ? 邮件: ? 企业微信: ? 十一、系统管理 1.角色管理 ?...通过 十二、其它问题 1.root无法直接登录问题 1.1 问题说明 由于root用户禁止直接登录,新建主机时登录用户不能设置为root,否则会报错,此时如果需要执行需要root权限的命令时,需要加sudo

4.4K20

实用干货丨Eolink Apikit 配置和告警规则的各种用法

API在运行过程中可能会遇到各种异常情况,如响应时间过长、调用频率过高、请求参数错误等,这些异常会对系统的稳定性和性能产生严重影响。因此,对API进行异常监控和告警是非常必要的。...全局告警设置邮件告警若需要对所有监控项目设置全局的告警通知,可以在 API监控的项目列表页面,选择 异常告警页面\ :在这里设置的告警信息,对所有项目有效。...在告警邮箱内设置相应人员的邮箱:注意事项:发送告警邮件需要消耗告警资源包。API告警、API恢复正常,均会产生告警邮件。告警邮件以项目为单位,同一时刻内,监控到异常的API和场景,会发送一封邮件。...告警人员设置当 API 产生告警时,可以直接通知到具体的项目人员,点击添加通知人员 :选择相应的人员账号,即可通知该成员。...注意:成员需要先在个人设置处设置好邮箱账号邮件告警若成员没有在个人帐号内设置邮箱,或需要通知到项目外的人员时,可以直接在额外告警邮箱处设置告警邮箱:系统会将异常API通过邮件的方式通知到相应的运维人员。

17630

得物 Redis 设计与实践

Proxy 写功能具备以下特性: Proxy 写功能采用异步写操作实现,性能优异,写操作对业务几乎无影响。...Kv-Admin Kv-Admin 是自动化运维平台的核心组件,负责处理所有前端发送过来的请求,核心功能包括: 负责完成实例部署时任务调度、机器推荐、端口分配、SLB 推荐与绑定。...四、监控与告警 自建 Redis 系统接入 APM 监控平台,提供了各种维度的监控指标和告警功能,及时对异常情况进行预警,当出现问题时,也能帮助快速定位问题。...告警 自建 Redis 包含大量的告警指标: ECS CPU 使用率、内存使用率、系统 Load(5 分钟平均值)、流量。 SLB 流量。...故障演练 为了提高自建 Redis 系统在异常场景下的可用性、检验自建 Redis 系统在各异常场景的恢复时间,我们不定期进行多次故障演练。

2.7K43

我所认知的甲方信息安全建设经验

办公网-网络安全建设 WIFI安全 事前安全措施:1、建立因素认证(通过个人账户密码+短信、动态密码);2、建立设备安全认证(限定特定的设备才能连接) 事中安全措施:1、建议WIFI账号爆破监控;2、...WIFI账号爆破封禁策略运营 V**安全 事前安全措施:1、远程接入公司内部网络进行因素认证(个人账户密码+短信、动态密码);2、硬件指纹获取识别 事中安全措施:1、V**异地登录;2、异常登录监控;...3、V**爆破监控以及封禁策略 事后安全措施:1、联系V**账号所属者确定攻击行为 日志流量采集检测 事前安全措施:1、办公网网络流量(到边界、到IDC);2、日志采集检测 事中安全措施:1、员工异常行为监控...事中安全措施:1、对员工行为进行监控(可通过前面介绍的几种方案);2、对钓鱼邮件进行告警 事后安全措施:1、对涉事员工进行相应处罚;2、钓鱼邮件影响评估 离职员工安全审计 1、离职行为审计;2、办公电脑审计...) 堡垒机:服务器统一登录管理,秘钥管理,访问控制策略运维工作 Router层统一映射管理:互联网端口、IP映射管理,结合cmdb平台运维工作 WAF:部署waf产品,拦截WEB攻击,告警记录运营工作

1.8K21
领券