首页
学习
活动
专区
圈层
工具
发布

数据中台建设(十):数据安全管理

​ 数据安全管理 ​ 在数据中台中所说的数据安全管理,侧重于企业内部的数据安全管理,是狭义的数据安全管理,重点放在大数据平台的安全管理技术手段上。...在大数据时代,数据的整个生命周期包含:数据产生、数据存储、数据传输、数据使用、数据共享、数据销毁这些环节,每个环节基于不同类型的数据,面向不同的人员都有不同的数据安全风险。...在数据中台中数据安全可以借助一些技术手段实现。...1、统一的安全认证和权限管理 在大数据中有很多安全管理技术,例如:Kerberos、Ranger、Hive、ClickHouse也都有自带的数据权限管理,在数据汇集、数据开发、数据体系中我们可以借助这些技术实现数据安全管理...4、数据脱敏 在数据传输、共享、展示时为了防止用户隐私数据、商业机密等信息泄漏,可以对数据使用大数据主键或者自建平台对数据进行脱敏处理。 ​

2.1K41

滴滴开源敏捷测试用例管理平台!

简介 AgileTC是一套敏捷的测试用例管理平台,具备与xmind等脑图工具一致的操作体验。支持测试用例管理、执行计划管理、进度计算、多人实时协同等能力,方便测试人员对用例和测试过程进行管理。...线上化的操作方式便于测试资产沉淀和测试过程数据沉淀,为测试改进提供抓手。 产品可以独立使用,也支持以组件化方式嵌入项目管理平台,配合项目管理使用。...AgileTC架构 架构 AgileTC的核心是测试用例集和测试任务,其中用例集的编辑和任务编辑当前均基于脑图,因此合并为一个平台。...最终由三个平台组成:脑图编辑平台、用例集管理平台和测试任务管理平台。以下主要介绍脑图编辑平台。...项目地址 项目地址:https://github.com/didi/AgileTC 原文始发于微信公众号(全栈程序员社区):滴滴开源敏捷测试用例管理平台!

1.8K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    测试用例的管理

    由于一个测试用例可能既属于回归测试,又属于冒烟测试,所以这种情况下就需要一个良好的测试管理系统或者管理方法来对大量的分类后的测试用例进行管理。...当测试数量很大的时候,如果测试用例管理系统不易用,测试用例的复用性也不高,则会导致测试用例不易维护,从而会极大的增加了其管理成本。...所以它有一定的学习曲线,并且基本上都是界面操作,相对比较繁琐,有些修改很难跟踪,比如测试步骤和测试数据的更改等。其次这种系统一般需要一个独立服务器来部署和运行,如itest,TestLink等。...本方法的优势是可以同时管理自动化测试用例和手动测试用例,并且更容易跟踪测试用例和测试数据的更改。而劣势是需要测试工程师有足够的工程技术能力来实现。...Cucumber测试用例管理和活文档示例图: 方法四:使用系统活文档本方法是将代码活文档和系统管理结合,通过测试管理系统编写和管理测试用例,然后会自动生成代码模式的测试用例。

    1.3K20

    数据治理(十五):Ranger管理Hive安全

    Ranger管理Hive安全 一、配置HiveServer2 访问Hive有两种方式:HiveServer2和Hive Client,Hive Client需要Hive和Hadoop的jar包,配置环境...:10000> show tables; [1305ccf6f317080d714dea4ca74b6bfd.png] 二、安装Ranger-hive-plugin 我们可以使用Ranger对Hive数据安全进行管理...,这里需要安装Hive插件“ranger-2.1.0-hive-plugin”,此插件只能对jdbc方式连接Hive的请求进行权限管理,不能对hive-cli客户端方式进行权限管理(一般安装Hive的节点才能使用...如果想要对连接Hive的用户进行表、列权限管理,需要在Ranger中添加对应的Hive服务,才可以使用Ranger通过这个服务配置每个用户对Hive库、表、列权限管理。...四、Ranger对Hive用户进行权限管理 查看Ranger中配置好的Hive权限管理服务: [b622be5b3ee859daee624a7ae09e558f.png] 修改上图中只有root用户对所以库

    3.8K41

    Appium自动化(十三)引入ddt管理测试用例数据

    前言 在上一篇文章--Appium自动化(十二)Appium+unittest组织测试用例,来组织测试用例,那么用例的数据我们是否也可以统一管理呢,答案是可以的。...正文 我们选择了ddt来管理,首先我们去安装ddt pip install ddt 那么如何使用呢?首先我们先导入ddt数据驱动。...=[{'username':"name",'password':"123456"}, {'username':"shibai",'password':"123456"}] 那么我们在测试用例中怎么使用呢...,使用数据驱动来管理这样的数据,那么我们按照这样的方式也可以把其他的数据按照这样的方式提取出来,完成来我们数据的提出,使用ddt来驱动管理数据,目前的我们的数据只是存储在代码文件中,后续呢,我们可以存放在文件中进行管理...,如何维护多功能的测试用例测试数据。

    41710

    【大数据安全】数据管理安全&安全分析&隐私保护

    一、数据管理安全 (一)数据溯源 数据溯源技术对大数据平台中的明细数据、汇总数据使用后中各项数据的产生来源、处理、传播和消亡进行历史追踪。...(三)策略管理 策略管理为隐私处理模块和隐私还原管理模块提供处理策略配置和版本管理,处理过程中所用到密钥的版本管理和存储管理都由其统一管理,保存到特定的安全位置,一般只由去隐私处理模块和还原处理模块调用...大数据平台中的安全策略管理主要涵盖三个部分, 一是对安全密钥、口令保护进行统一定义与设置;二是对安全规则进行集中管理、集中修订和集中更新,从而实现统一的安全策略实施; 三是安全管理员可以在中央控制端进行全系统的监控...大数据平台中安全策略管理的特性具体要求如下: (1)大数据平台应具备对安全规则进行集中管理的功能,并且支持对安全规则的远程配置和修订; (2)对密钥和口令相关的帐户支持集中化管理,包括帐户的创建、删除...(5)对需要还原使用的敏感数据采用可逆加密算法加密,禁止使用不安全的加密算法加密敏感数据。 2、密钥的安全 密钥的安全管理对于整个大数据平台的安全性至关重要。

    59310

    数据安全管理之基础技术篇

    相比与将这些问题分散到各个主机上,防火墙的集中安全管理更经济。如果所有的访问都经过防火墙,那么防火墙就能记录下这些访问并生成日志,同时也能提供网络使用情况的统计数据。...八、数据防泄漏(DLP) 数据防泄漏主要是为了规范和加强企业文档数据使用的安全管理,保障敏感文档数据的安全,降低泄漏的风险。...数据防泄漏管理首先要做好组织划分,一般是由领导小组、运营小组、业务接口人小组组成。领导小组是公司数据防泄漏管理的决策组织,负责数据防泄漏管理事务的整体推进。...运营小组是公司防泄漏工作的管理组织,负责统筹、协调、运营数据防泄漏工作。业务接口人是推进数据防泄漏落地的主要力量,是管理团队和业务团队的连接点。...由于本文的主旨在于数据安全管理,因此对这些安全防护产品没有展开很详细的讲解,只进行了简单的介绍。

    32010

    数据安全实践之数据资产管理

    前言 在企业安全建设中,资产管理是很多安全工作的基础。而数据资产管理可以帮助我们更准确的发现安全风险,执行更有效的控制措施,在数据安全体系化建设中也有着举足轻重的作用。 数据安全视角的数据资产 ?...整体架构与价值 数据资产管理主要分为三部分:数据采集,数据整合与识别,数据使用 ?...数据调取,访问的权限管控,根据数据目录,数据负责人,建立管控流程 识别重要数据系统,接口,推进安全防护项目,包括数据加密,脱敏,认证,日志等改造 数据泄露事件的告警,溯源,审计,提供基础数据和综合分析平台...2.数据所属应用,应用数据接口 应用一般从CMDB或公司的资产管理平台中获取,注意的是需要有一个唯一标识将应用和数据库进行关联。...,已发布公告等 数据资产管理中阈值数据分级分类字典,如: 数据标签 数据分类 数据分级 手机号 用户数据 L3 用户画像 用户数据 L3 员工工资 公司数据 L3 昵称 用户数据 L0 敏感数据识别

    2.9K10

    数据治理(十一):数据安全管理Ranger初步认识

    数据安全管理Ranger初步认识 在大数据平台中,有海量数据存储,通畅在采集数据过程中敏感数据有意或者无意的进入大数据平台中,数据安全管理非常重要。...我们不希望一些敏感数据被他人访问,希望可以按照一种规则给部分人访问权限,以防止数据泄露,针对数据安全管理可以使用Apache Ranger实现。...一、​​​​​​​Ranger介绍 Apache Ranger提供一个集中式安全管理框架, 并解决授权和审计。...我们可以通过Ranger提供的UI界面或者Rest API来管理所有与安全性相关的任务,可以使用管理工具来对Hadoop体系中的组件进行授权。...Ranger官网:Apache Ranger – Introduction 二、Ranger架构 Ranger架构如下: Ranger-admin: Ranger实现安全管理的核心就是Ranger-admin

    2.9K31

    DCMM标准之数据安全域解读(二):数据安全管理

    GB/T 36073-2018《数据管理能力成熟度评估模型》设置数据安全能力域,包含数据安全策略、数据安全管理、数据安全审计3个能力项,给出5个能力等级标准:初始级、受管理级、稳健级、量化管理级、优化级...数据安全管理:评估组织在整个数据生存周期中,依据数据安全策略和相关标准,管理数据的分类分级、访问控制、风险管理等数据安全活动方面的能力级别。...数据安全审计:评估组织在分析、验证、改进数据安全活动方面的能力级别。 03—数据安全管理能力项 一、概述 数据安全管理:是在数据安全标准和策略的规划下统一对组织数据安全的管理工作。...数据安全管理流程示例:对数据安全问题形成闭环管理,从数据安全定义,到问题发现和分析,问题跟踪,到最后数据安全评估和统计。...级别 4:量化管理级 条款1) 定义了数据安全管理的考核指标和考核办法; 条款2) 定期汇总数据安全管理工作进展,在组织层面发布数据安全管理工作报告; 条款3) 重点数据的安全控制可落实到字段级

    56610

    AgileTC --滴滴开源敏捷的测试用例管理平台环境搭建与试用

    滴滴开源了敏捷的测试用例管理平台,看了下大家部署遇到了各种各样的问题,那么正好呢,我也想体验下这个平台,正好有空,尝试着去搭建下。...---- 首先,我们去下载代码 git clone https://github.com/didi/AgileTC.git 然后呢,根据官网的教程呢,我们去创建数据库case_manager...然后将 case-server/sql/case-server.sql的文件执行,去创建对应的数据库的表。 ? 接下来呢,我们去修改后端的配置。...application-dev.properties中spring.datasource的配置修改成你自己的数据库的配置如下 spring.datasource.url=jdbc:mysql://127.0.0.1...我们去创建下测试用例 ? 这里我先不导入本地的 ? 试着编辑下 ? 功能很强大 保存后,我们去看到我们的测试用例 ? 我们可以为测试用例创建测试任务 ? 我们点击创建测试任务 ? 点击保存 ?

    3.9K20

    EasyMR 安全架构揭秘:如何管理 Hadoop 数据安全

    近年来,数据安全正在快速成为当今信息化时代一个备受关注的话题。在数字化快速发展的今天,各个领域都离不开数据的支撑,而数据安全问题也随之成为了一项重要的任务。...作为领先的数字化基础软件与应用服务商袋鼠云,一直以来也高度重视数据安全问题,2022年12月,在自研的大数据计算引擎 EasyMR 上新增了一站式大数据应用安全防控以及数据权限管控能力。...基于此,EasyMR 可以实现一键部署安全管控服务,一键开启大数据集群组件的安全认证、用户管理以及权限管控服务。 本文就为大家展开介绍一下 EasyMR 具体是如何管理 Hadoop 数据安全的。...• LdapServer 能够解决多层次、多类型系统、数据库的安全访问难题,所有与账号相关的管理策略均配置在服务端,实现了账号的集中维护和管理。...• LdapServer 能够充分继承和利用平台组织中现有的账户管理系统的身份认证功能,并实现了账户管理与访问控制管理的分离,提高了大数据平台访问认证的安全性。

    1.4K30

    测试用例管理工具推荐

    读者提问:有哪些好用的测试用例管理工具?阿常回答:这个问题我从三点回答1、为何要采用测试用例管理工具;2、有哪些常见的测试用例管理工具;3、如何来选取测试用例管理工具。...一、为何要采用测试用例管理工具以前我们用 Excel 来维护测试用例,产品发布前把 Excel 里的用例过一遍,这样做似乎是可行的。...通过 Excel 维护用例,我们遇到的挑战:1、多人协作,用例没有统一存放地点2、项目迭代,用例如何保证常用常新3、用例设计,如何方便复用基础用例二、市面上常见测试用例管理工具Testhub、Jira、...三、如何来选取测试用例管理工具主流的测试用例管理工具(Testhub、Jira、禅道、TAPD)各有优缺点。如果团队无特殊需求,可以任选其一。如果有特殊需求可以尝试定制化或自研。

    2K10

    腾讯云主机安全试用体验

    安全预警这个页面直接上图,我每次都觉得可。安全加固安全板块,主要是漏洞和基线安全。漏洞管理进去弹出一个新的更新,我们体验一下。现在看下基本页面。我们来进行漏洞设置。和防护的开启。...漏洞管理页也可以进行扫描和防御的设置,这里不再赘述。刚才通过基线检测发现漏洞这里可能漏了,所以补充一下数据。我们通过详情拉一下详细数据。会显示主机列表和漏洞数据。点击漏洞数会进入机器信息。...在事件调查处点开,会提示可以授权,获取机器前14天数据,授权以后就会回溯,新机器设置可以在授权管理页面处,看到开关。新增主机设置的开关。点开。这里我们展示一下事件调查有数据的样子。...基线管理这里是针对主机安全的基线做一些检测和加固。我们还是先去看右上方的设置,主要有几个板块。点击编辑可以进行规则的灵活选择,如果有自定义规则。...你可以点击右上角按钮一键开启免费试用,或购买套餐享受限时优惠第一道防线,云防火墙第二道防线,web应用防火墙第三道防线,主机安全,容器安全加固防线,ddos防护,云安全中心,威胁情报中心。

    2.6K30

    基于git的测试用例管理方案

    | 导语 使用YAML文件描述测试用例,自动化生成测试用例,并提供网页访问的能力;同时对测试用例数据进行多维度的统计,提供丰富的测试用例管理和查看视图,更好的保障客户端迭代质量。...按照代码的方式管理测试用例,提交到主干需要发起Merge Request,保证经过Review后才能使用 用git管理测试用例的好处很多,但是怎么去写测试用例呢?写个excel文件放上去?...除了本地预览测试用例页面之外,我们还提供了在本地查看测试用例、进行数据校验等能力。...整体流程 总结 我们基于git的测试用例管理方案,使用YAML文件描述测试用例,自动化生成测试用例,并提供网页访问的能力;同时对测试用例数据进行多维度的统计,提供丰富的测试用例管理和查看视图,更好的保障客户端迭代质量...测试用例描述作为核心数据,直接存储git仓库中,也非常方便后续的扩展,比如生成更丰富的统计视图,将数据导入其他平台等。

    4.4K42

    『测试基础』| 如何理解测试用例管理和缺陷管理?

    是否包含了测试数据、测试数据的生成办法?是否具备可操作性?优先级安排是否合理?是否删除了冗余的测试用例?用例设计的是否简洁?是否复用性强?4 测试如何维护?...6 用例管理工具用例管理的工具有很多,比如1、PingCode;2、TestRail;3、TestLink;4、Jira;5、PractiTest;6、PractiTest;7、Zephyr Enterprise...待修改、已确认、已修改、重复、待评审、关闭等等缺陷标题简单明了说明缺陷严重程度 一般为致命、严重、一般、提示、建议;有的也分A、B、C、D等紧急程度从1到4,最高为1级 缺陷类型功能缺陷、界面设计缺陷、安全性...、接口、性能、数据等缺陷 提交人 缺陷的提交人员,便于缺陷复现、跟踪和管理所属项目或模块明确缺陷的所属解决人一般为对应的开发人员 解决时间比如项目经理指定的开发人员解决缺陷的时间关闭时间最终被关闭的时间等...9 缺陷管理工具之前提到的用例管理工具同样适用缺陷管理:1、PingCode;2、TestRail;3、TestLink;4、Jira;5、PractiTest;6、PractiTest;7、Zephyr

    58920

    测试用例管理工具推荐

    读者提问:有哪些好用的测试用例管理工具? 阿常回答:这个问题我从三点回答 1、为何要采用测试用例管理工具; 2、有哪些常见的测试用例管理工具; 3、如何来选取测试用例管理工具。...一、为何要采用测试用例管理工具 以前我们用 Excel 来维护测试用例,产品发布前把 Excel 里的用例过一遍,这样做似乎是可行的。...通过 Excel 维护用例,我们遇到的挑战: 1、多人协作,用例没有统一存放地点 2、项目迭代,用例如何保证常用常新 3、用例设计,如何方便复用基础用例 二、市面上常见测试用例管理工具 Testhub...三、如何来选取测试用例管理工具 主流的测试用例管理工具(Testhub、Jira、禅道、TAPD)各有优缺点。 如果团队无特殊需求,可以任选其一。 如果有特殊需求可以尝试定制化或自研。

    1.5K30
    领券