金融科技&大数据产品推荐：BIGDAF——专业的Hadoop大数据安全防火墙
*本文原创作者：mcvoodoo，本文属FreeBuf原创奖励计划，转载请联系help@freebuf.com 随着大数据的发展，从银行到P2P再到保险、证券等，越来越多的金融企业开始建设自己的大数据平台。传统上对于数据的管理，金融界是有经验的。 但在当前以Hadoop为基础的大数据平台，接触数据的人更多，数据使用的更频繁，数据的内外交互实时，数据种类更复杂，对安全带来了更严峻的挑战。 从金融业态上来说，包括征信、消费金融、P2P、众筹、互联网银行、互联网保险等金融企业，都会需要大数据平台来支撑业务需要。
近日，由金科创新社主办，全球金融专业人士协会支持的“2023鑫智奖·第五届金融数据智能优秀解决方案评选”榜单正式发布。腾讯安全申报的“SOC+基于新一代安全日志大数据平台架构的高级威胁安全治理解决方案”获评“鑫智奖·网络信息安全创新优秀解决方案”。
东方金信CEO王伟哲：金融大数据将推进全社会的诚信建设
2019年1月，CDH 背后的公司 Cloudera 宣布与 Hortonworks（一家围绕着大数据平台去做发行版的公司）合并，形成了新的 Cloudera 公司。 两家公司合并之后，迅速对产品进行了整合推出了新一代产品——CDP，同时也宣布在2021年底结束对 CDH6 的服务支持。 这给国内企业敲醒警钟，要将以往使用的 CDH 大数据平台进行全面的迁移。 而时间拉到2021年12月29日，距离元旦仅三天，央行发布的一纸公文——《金融大数据平台总体技术要求》，在金融圈里炸开了锅。 以前的文件可能是从战略
【案例】国美金控：让消费金融可视更可靠
数据猿导读 在金融服务业开放政策和云计算、大数据技术双重推动下，互联网金融领域的跨界融合正在成为一种趋势。但在互联网金融与普惠金融业务中存在的风险不可小觑，需要借助大数据手段进行智能营销和风控。 本篇
数据猿导读 过去的2016年可称之为“智能金融”元年。相比过去五年，以云计算、大数据、区块链为首的新兴技术创新全面渗透至金融业的方方面面，用科技手段解决供需矛盾、用机器解放人力资源，以数据驱动的决策实
导读：本期“谁是数据英雄？传统企业大数据应用案例”给大家介绍《 兴业银行：信用卡背后的数据生命线》。兴业银行作为首批试水大数据的商业银行之一，借助大数据的关键技术和核心优势，通过对消费者行为的分析和
10000元能买多少份基金，看起来是一道简单的数学问题，实则是一道复杂的IT难题。
Apache Hadoop目前市场上主流的大数据研发技术之一，基于 Hadoop 开源框架开发的一个开源的分布式存储、分布式计算平台。
国家 2035 远景规划提出要加快全面数字化转型的步伐，而“大数据平台”是数字化转型的基础技术之一。经过六年多的探索和实践，微众银行打造了一套在金融领域“自主可控”的开源大数据平台。对于任何企业来说，建立和维护一个大数据平台都不是一件容易的事情，而建设一个有特色的、完整易用的大数据平台，显然更是一件技术难度极高的事情。InfoQ 采访了微众银行 WeDataSphere 主创团队，希望他们的实践经验能给大家带来一些启发和思考。
CSDN授权转载 译者：袁璞 摘自：CSDN 2015 年对于银行和金融业公司来说是一个开局之年，在这一年中他们继续用大数据来帮助他们进行业务和组织架构的演进。现在，放眼2016年将要面对的，我们猜测金融服务公司为了利益最大化进而不断整合大数据环境而言，他们面前的路依旧漫长。 银行家们也正在起草大数据战略，制定入门和随后的用例。 对于银行来说，大数据主要还是围绕提高客户情商，减少风险，符合监管。在可见的未来处于第一梯队的大型金融集团都会继续围绕大数据展开各种动作。在低端市场，一些中小型的公司（经纪、资产管理
数据猿导读 随着数据量的不断增大、接入的系统越来越多，系统加工效率逐步降低，满足内部数据分析和监管机构的监管数据不断增加的需求，农业银行在2013年开始建设完全自主可控的大数据平台。 本篇案例为数据猿
2015 年对于银行和金融业公司来说是一个开局之年，在这一年中他们继续用大数据来帮助他们进行业务和组织架构的演进。现在，放眼2016年将要面对的，我们猜测金融服务公司为了利益最大化进而不断整合大数据环境而言，他们面前的路依旧漫长。 银行家们也正在起草大数据战略，制定入门和随后的用例。 对于银行来说，大数据主要还是围绕提高客户情商，减少风险，符合监管。在可见的未来处于第一梯队的大型金融集团都会继续围绕大数据展开各种动作。在低端市场，一些中小型的公司（经纪、资产管理、区域银行、顾问等）能够更快速的适应大数据平台
该案例描述了中国农业银行基于中兴通讯GoldenData大数据平台，实现了对海量数据的快速处理，提升了业务应用的性能，并支持了数据分析和决策制定等需求。
5月8日，腾讯云联合鹏华基金共同对外宣布，通过双方技术团队以及战略合作伙伴华云中盛共同努力，腾讯云大数据套件TBDS日前已经正式在鹏华基金大数据核心系统落地应用，实现对原有大数据TA（Transfer Agent，过户代理）和营销数据中心的国产化替换。
近日来，有幸和国内不同行业的CIO(医疗、教育、互联网、金融等)交流了大数据的看法，听了听他们一线用户对于大数据的理解，总体来看他们对于大数据本身充满了积极的热情，并且对于大数据有着深刻的认知包括对于大数据技术、产品以及“瓶颈”，虽然现阶段这些行业企业开展大数据仍然存在一定的阻力，但这些行业CIO普遍看好大数据以及其未来行业的发展。 大数据行业前景以及发展不做过多的阐述，从大数据的应用现状来看，现在不论哪个行业企业在开展大数据时有许多问题待解决比如如何打通并且获得基于企业内部数据之外的互联网数
4月20日，京东大数据来到了北京大学光华管理学院，这次由京东大数据部平台运营管理负责人葛胜利老师给北大光华管理学院的师生们带来主题为“电子商务大数据平台技术架构与产品架构”的专题讲座，为大家讲述京东大数据平台如何在短短几年的时间里突破技术难关，实现产品创新，建设高效、安全、稳定的大数据平台，并以数据支撑京东的快速发展。 讲座中，葛胜利从京东大数据平台的“使命、架构、产品、运营”四大方面出发，全面的剖析了其中的奥秘。 在讲到平台使命时，胜利总提到，大数据平台在京东集团中的战略地位很重要，因为京东的公司运营是由
车库咖啡远走厦门建“公场” 欲建设大数据共享平台 北京中关村著名众创空间——车库咖啡入驻海沧区，成立“厦门车库咖啡大数据创新公场”。利用厦门市和海沧区在信息化与智慧城市建设中取得的成果，结合当地的产业
在大数据产业近十年潮起潮落的变迁中，有一座穿越迷雾的灯塔，驱散了人们对数据应用的疑虑，照亮了数据价值回归的征程。
本篇内容将通过三个部分来介绍工商银行实时大数据平台建设历程及展望。 一、工行实时大数据平台建设历程 二、工行实时大数据平台建设思路 三、展望
大家早上好！非常高兴有机会跟大家分享一下《中国电信在灯塔大数据技术创新和行业应用实践》。 其实，大数据对运营商非常重要，它对内怎么样能提到网络运营资源为客户提供更好服务的作用，对外为行业服务，我今天讲的中国电信灯塔大数据内容，主要指的是对外的。 灯塔大数据的定制，这就是一个比较炫的大数据产业视图，包括的内容很丰富，产业链上的都在这儿了。中国电信的灯塔大数据平台，主要是这样三个定位： 做多元数据的整合 打造它的能力平台 创新行业应用 1、多元的数据整合，电信的数
<数据猿导读> 日本东芝集团开发最新数据处理技术，将应用于深度学习；西部首个知识产权大数据平台落户四川，解决专利申请难题；黑龙江将建对俄大数据中心……以下为您奉上更多大数据热点事件 来源：数据猿 作
尽管大数据对商业银行的影响目前而言还比较小，但从发展趋势看，要充分认识大数据的颠覆性影响。各银行必须未雨绸缪，早做布局，从管理体系建设、具体运用模式方面不断探索，抓紧解决内部数据挖掘分析和外部资源的安全整合利用问题，加快人才队伍建设和技术成果转化，通过大数据的高效应用，加速推进转型升级与可持续发展。 一是明确大数据战略的顶层设计。大数据战略要超越IT部门或电子银行部的视角，面向全局和长远，以客户需求为导向，构建自身的大数据结构。一个完整的客户数据应该包括如下几个维度：一是客户基本信息，包括身份信
2013年6月13日，余额宝面世，截止3季度末，余额宝已经吸纳资金556.53亿元，实际用户1367.88万户，11月11日当天即时收益率4.8250%。10月28日，“百度金融中心——理财“平台支持的华夏基金上线，由于网民对其高年化收益的期待，不到4小时内即抢购10亿元。10月31日，百度理财平台支持的第二款产品“百赚”持续火爆，人均认购额高于行业平均水平10倍。而在此同时新浪、腾讯都在紧锣密鼓的牌照申请中。对于传统金融行业而言狼真的来了。
现代商业竞争已经从渠道、资源向系统整体效率倾斜，而效率的竞争很大程度上来自于数据能力的支撑。 当我们从数据平台方的视角出发会发现演进路上存在着诸多挑战，比如： 1. 数据领域的生态非常庞大，针对不同场景在资源、数据规模、时效的权衡下会衍生出不同的架构和组件，以及随之带来的团队碎片化，设备资源的重复投入，数据一致性的焦虑，技术选型的困难和迁移的潜在风险； 2. 在伴随业务扩张的过程中，如何平滑而透明地解决伸缩性，用好自建以及混合多云资源；如何建设一站式多租户的数据工具链，在开发生产以及租户之间做好共享和隔离的
<数据猿导读> 中国电信云计算中心主任赵慧玲在2016年中国信息通信大数据大会上发表了以“中国电信灯塔大数据”为主题的演讲。在赵慧玲看来，中国电信灯塔大数据的定制，这是一个比较炫的大数据产业视图，主要
大数据存储不是一类单独的产品，它有很多实现方式。EMC Isilon存储事业部总经理杨兰江概括说，大数据存储应该具有以下一些特性：海量数据存储能力，可轻松管理PB级乃至数十PB的存储容量；具有全局命名空间，所有应用可以看到统一的文件系统视图；支持标准接口，应用无需修改可直接运行，并提供API接口进行面向对象的管理；读写性能优异，聚合带宽高达数GB乃至数十GB；易于管理维护，无需中断业务即可轻松实现动态扩展；基于开放架构，可以运行于任何开放架构的硬件之上；具有多级数据冗余，支持硬件与软件冗余保护，数据具有高可靠性；采用多级存储备份，可灵活支持SSD、SAS、SATA和磁带库的统一管理。 通过与中国用户的接触，杨兰江认为，当前中国用户最迫切需要了解的是大数据存储有哪些分类，而在大数据应用方面面临的最大障碍就是如何在众多平台中找到适合自己的解决方案。 EMC针对不同的应用需求可以提供不同的解决方案：对于能源、媒体、生命科学、医疗影像、GIS、视频监控、HPC应用、某些归档应用等，EMC会首推以Isilon存储为核心的大数据存储解决方案；对于虚拟化以及具有很多小文件的应用，EMC将首推以VNX、XtremIO为核心的大数据存储解决方案；对于大数据分析一类的应用需求，EMC会综合考虑客户的具体需求，推荐Pivotal、Isilon等一体化的解决方案。在此，具体介绍一下EMC用于大数据的横向扩展NAS解决方案——EMC Isilon，其设计目标是简化对大数据存储基础架构的管理，为大数据提供灵活的可扩展平台，进一步提高大数据存储的效率，降低成本。 EMC Isilon存储解决方案主要包括三部分：EMC Isilon平台节点和加速器，可从单个文件系统进行大数据存储，从而服务于 I/O 密集型应用程序、存储和近线归档；EMC Isilon基础架构软件是一个强大的工具，可帮助用户在大数据环境中保护数据、控制成本并优化存储资源和系统性能；EMC Isilon OneFS操作系统可在集群中跨节点智能地整合文件系统、卷管理器和数据保护功能。 杨兰江表示，企业用户选择EMC Isilon的理由可以归纳为以下几点。第一，简化管理，增强易用性。与传统NAS相比，无论未来存储容量、性能增加到何种程度，EMC Isilon的安装、管理和扩展都会保持其简单性。第二，强大的可扩展性。EMC Isilon可以满足非结构化数据的存储和分析需求，单个文件系统和卷中每个集群的容量为18TB～15PB。第三，更高的处理效率，更低的成本。EMC Isilon在单个共享存储池中的利用率超过80%，而EMC Isilon SmartPools软件可进一步优化资源，提供自动存储分层，保证存储的高性能、经济性。第四，灵活的互操作性。EMC Isilon支持众多行业标准，简化工作流。它还提供了API可以向客户和ISV提供OneFS控制接口，提供Isilon集群的自动化、协调和资源调配能力。 EMC Isilon大数据存储解决方案已经在医疗、制造、高校和科研机构中有了许多成功应用。
新三板上市 一、大数据平台“索信达数据”新三板挂牌上市 近日，大数据平台“索信达数据”宣布成功登陆新三板，挂牌上市。据了解，索信达数据成立于2004年3月25日，总部位于深圳，公司致力于通过大数据分析技术以及自有的大数据平台，帮助企业将海量的数据转化为商业价值，主要服务于金融、互联网、政府、制造、航空等多个行业。为其提供基于大数据的智慧营销管理、风险控制管理软件平台、决策支持平台、智能系统运营管理服务和数据可视化产品。 📷 二、互联网广告解决方案服务商“联创云科”成功登陆新三板
<数据猿导读> 在本周（4月16日——4月22日），大数据领域共发生5起投融资事件。其中，承德市政府在京签订了14个大数据产业项目，总投资达205亿元；Oracle甲骨文公司以5000万美元收购大数据
数据猿导读 证券行业是中国计算机应用高度密集的行业之一，如何利用好各项数据是券商摆脱低层次的同质化竞争，走向差异化服务优势的重要途径。那么以数据为基础，通过数据分析指导服务和决策就显得尤为重要。 本篇
<数据猿导读> 51信用卡获3.1亿美元融资，用大数据走上金融变现之路；麻省理工学院发布编程语言Milk，帮助开发者有效管理内存；百度视频完成上亿融资，用大数据+人工智能实现精准推送……以下为您奉上更
随着大数据政策环境和技术手段的不断完善，大数据行业应用持续升温，中国企 业级大数据市场进入快速发展时期。互联网、电信、金融等开始实际部署大数据平台 并付诸实践，带动软件、硬件和服务市场快速发展。为进一步掌握中国大数据发展和应用情况，中国信息通信研究院开展了2016—2017年度中国大数据发展状况的调查。本报告以调查数据为基础，结合行业专家的访谈，力争详实客 观的反映中国大数据发展现状，为政府和企业了解中国大数据发展状况和制定相关决策提供参考，也为广大关注大数据的从业人员、专家学者和研究机构提供真实可信的大
大数据基础设施的发展经历了四个主要阶段，每个阶段都有着标志性的技术进步来应对新的应用需求。
贵阳交易所推出10大战略，将打造数权、数融在内的12个大数据平台 近日，已经成立一年多的中国首家大数据交易中心——贵阳大数据交易所宣布即将推出包括“数据”星河战略、大数据交易高峰盛典、打造贵漂文化、中
践行十四五规划“加快数字化发展 建设数字中国”的重要篇章，各级政府也在加快推进政务服务数字化转型。“数字政府”是建设“数字中国”的有机组成部分，是推动社会经济高质量发展的重要引擎，因此，发力“数字化基建”也成了备受重视的关键举措。
随着数据成为生产要素，数据安全风险与数字经济发展如影随形，如何解决好数据安全领域的突出问题、提升数据安全治理能力都是社会各界的关注重点。
4.掌握大数据分析在搜索引擎、广告服务推荐、电商数据分析、金融客户分析方面的应用。
数据服务业务是未来趋势，荣之联刚刚发布的大数据平台DataZoo有啥亮点？
人类实现了信息的存储，就像Time Machine一样，回到任意一个点，通过已有的数据重新构建过去的影像，也能够预测未来，模拟一个虚拟而准确的未来环境
百度糯米上线大数据产品“店铺统计”，解决餐饮商家的运营难题 在2016百度糯米餐饮生态峰会上，百度糯米宣布上线了大数据产品——“店铺统计”。据悉，该产品可通过大数据技术分析，在商家的店铺页上直观展现商
为适应数据应用需求，大数据平台架构持续演进，历经数据仓库、数据湖两个阶段。2020年，湖仓一体概念提出，湖仓一体架构因能实现数据资产统一管理、降低数据冗余、降低大数据平台架构运维复杂性，将成为大数据平台的主流架构。
数据猿导读 在当前金融大背景下，我国商业银行正处于大幅调整阶段，面临不确定、不稳定因素正在不断增加，监管机构与公众日益认识到运营风险正成为金融机构面临的最大威胁之一，建立高效准确的商业银行营运风险监测系统已经成为“标准配置”。 📷 本篇案例为数据猿推出的大型“金融大数据主题策划”活动（查看详情）第一部分的系列案例/征文；感谢 恒丰银行 的投递 作为整体活动的第二部分，2017年6月29日，由数据猿主办，互联网普惠金融研究院合办，中国信息通信研究院、大数据发展促进委员会、上海大数据联盟、首席
站长以前介绍过这个开源项目，最近又有人在问，索性挂在Dotnet9网站上，方便大家在线浏览，先声明，模板来自下面的仓库：
<数据猿导读> 艾美仕健康与Cloudera 达成合作，将用于打造医疗大数据平台；人民日报与四川日报合作，开启西部媒体大数据新篇章；eBay收购SalesPredict专注人工智能，或向亚马逊“隔空叫
9月11日，在2020腾讯全球数字生态大会上，腾讯云副总裁刘煜宏透露，腾讯云大数据平台的算力弹性资源池达500万核，每日分析任务数达1500万，每日实时计算次数超过40万亿，能支持超过一万亿维度的数据训练。腾讯云不仅已经成为国内算力最强的云厂商，同时也是日实时计算量最大的公司。 腾讯云副总裁 刘煜宏 「 算力资源池达500万核，日实时计算量超40万亿」 基于多年在数字化方面的积累，腾讯云正在把腾讯多年来的能力沉淀对外开放。除了云计算、大数据、AI、安全、LBS、区块链等基础技术服务，以及支付、小程
数据猿导读 恒丰银行探索采用大数据技术构建统一的企业级数据管理平台，重构数据仓库应用，减少数据重复加工与存储，促进信息管理应用的数据融合共享，提高数据处理总体效率，提升数据分析和应用创新能力，正逐步取得预期的成效。 📷 本篇案例为数据猿推出的大型“金融大数据主题策划”活动（查看详情）第一部分的系列案例/征文；感谢 恒丰银行 的投递 作为整体活动的第二部分，2017年6月29日，由数据猿主办，互联网普惠金融研究院合办，中国信息通信研究院、大数据发展促进委员会、上海大数据联盟、首席数据官联盟协
2020年9月11日，在2020腾讯全球数字生态大会上，腾讯云副总裁刘煜宏透露，腾讯云大数据平台的算力弹性资源池达500万核，每日分析任务数达1500万，每日实时计算次数超过40万亿，能支持超过一万亿维度的数据训练。腾讯云不仅已经成为国内算力最强的云厂商，同时也是日实时计算量最大的公司。
量化派是一家金融大数据公司，为金融机构提供数据服务和技术支持，也通过旗下产品“信用钱包”帮助个人用户展示经济财务等状况，撮合金融机构为用户提供最优质的贷款服务。金融的本质是风险和流动性，但是目前中国对于个人方面的征信行业发展落后于欧美国家，个人消费金融的需求没有得到很好的满足。按照央行最新数据，目前央行征信中心的数据覆盖人口达到8亿人[1]，但其中有实际征信记录的只有3亿人左右，有5亿人在征信系统中只是一个身份证号码。此外，我国还有5亿人跟银行从来没有信贷交易关系，这5亿人对金融部门来说是陌生人。这样算下来
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
