展开

关键词

「PowerBI」从白领蜕变之旅(一)-具总览

分析的前提是有干净完整规范的存在,为了这个前提,许多人活在的状态(天天搬砖干苦累活),将大量的时间耗费在一些无意义的、没价值的、产出低的处理中。 我们要选择什么样的具? Excel催化剂现有的100+功能中,起码有90+的功能是为了服务ETL部分的,相信在Excel催化剂的这一系列辅助功能的支持下,的状态将得到非常大的改善。 微软给到我们的架构图如下,除了的抽取外,还可以使用到Azure的机器学习、认知服务AI等功能来对非结构化进行分析加,转换为结构化的供下游的建模和分析具使用。 结语时代在进步,人的能力也被重新要求,在领域,ETL的本领的掌握,能够帮助我们从式的繁重作中得以解脱出来,换来的是我们通过脑力的劳动,学习先进的具,更轻松地完成、整理、处理等

12710

为什么“高大上”的算法程师变成了

实际中的算法程师:提出假设->收集->预处理->预处理->训练模型->调试->调试->重新收集->预处理->收集更多->调试->调试->调试->…->放弃。 为什么“高大上”的算法程师实际上是个,要寻找这种理想与现实的差距的原因,首先要理解一个事实:只有人能够理解,机器不能。 而是和业务强相关的,算法程师将更加接近产品经理的角色,而不是程序员。深入理解、业务和产品,寻找模型和它们的结合点,将成为算法程师的核心竞争力。 从“IT精英”到“IT”或者“码农”,这种称呼上的转变并非笑谈,而是真实的反应了计算机编程领域门槛逐步降低的过程。 所以,我们应当给听上去高大上的“算法程师”或者“科学家”起一个类似的外号,比如“”、“机农”或者“蒜农”之类,以免不明真相的孩子们被“高大上”的称号吸引而误入歧途。

1.6K90
  • 广告
    关闭

    50+款云产品免费体验

    提供包括云服务器,云数据库在内的50+款云计算产品。打造一站式的云产品试用服务,助力开发者和企业零门槛上云。

  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    【AI的正面与侧面】披着光鲜的外衣的“

    所以本篇整理了人智能不那么智能的一面,这里有一个很少被提及也容易被遗忘的人群,那就是人智能浪潮下辛苦劳作的“人”。人智能需要,高质量的标注决定了一家人智能公司竞争力。 眼下这些厂业务大多是标注,即根项目方要求,人为图片、视频和语音内容打标签、做标记。 小编曾采访过一家专业的平台,旗下有12家下辖厂及2000余名操作员来支持的采集、清洗、标记等产品化服务。 两者的区别在于众包平台上多为互联网网兼职操作,由于没有受过专业化培训,在质量和量都难以满足专业化的需求。? 而在产业链的最底层是更为现实的一面,一批批身份各异,从未被提起的人们成为了新时代的。人智能,仍需要大量的人劳动给养,其实并不高大上。

    66050

    ETL」从白领蜕变之旅(二)-重温Excel催化剂经典

    而此插件凝聚了笔者在分析领域中ETL部分的绝大部分的场景,并让这些场景可以低门槛化让几乎只需入门级的Excel用户即可学习掌握。 在此ETL专题的系列中,我们一起来重温此经典,同时也让后关注者可以有更好地导读性指引。 结语本篇主要给大家重温Excel催化剂插件在ETL方面的作用和价值,在中小型规模下,和一些日常部门级别的处理、分析需求上,非常多的功能可完全匹配到位,无需成为一个多高级的Excel用户,一样可以在 Excel环境下做出许多资深Excel用户所能做成的作,真正赋能普通用户,发挥极大生产力的好具。 笔者未来聚焦在领域的分享,不限于Excel,会分享更多Sqlserver、dotNET、Azure、PowerBI等话题,升级分析的能力,欢迎继续关注。*

    10640

    ETL」从白领蜕变之旅(四)-有了PowerQuery还需要SSIS吗?

    在真正的企业级BI项目中,使用PowerBIDeskTop那一套ETL是不可行的,需要使用专业的ETL具完成仓库的搭建,再进行建模的作。 鉴于笔者所能触达的读者群体,多为业务背景的分析作者,本篇给大家带来简单的入门实操演示,让大家减少对专业IT型具的恐惧心理。 控制流和流的区别,用笔者语言来说是控制流是类似我们写程序的一个函、过程任务片段,完成一件单元的任务,而流,是指控制流中涉及到的转换处理的加过程,就像一个管道一样,从控制流的起点开匝放水 *系列文章从白领蜕变之旅(一)-具总览 https:www.jianshu.comp2bd3f90206ec从白领蜕变之旅(二)-重温Excel催化剂经典 https:www.jianshu.compcb89929bb8ae 从白领蜕变之旅(三)-除了Excel催化剂之外PowerQuery新物种同样值得期待 https:www.jianshu.compd154b09c881d

    10310

    ETL」从白领蜕变之旅(六)-将Python的能力嫁接到SSIS中

    此篇演示python脚本帮助清洗作,成为SSIS流程中的一部分,同理其他语言其他具亦可以完成,只要有最终输出即可供SSIS使用。 但对于一个具型的做事方式来说,为何有现成的具不用,而转而自己从零开始写代码完成,况且自己写出来的代码,也不会像专业具考虑得那么周到完善,例如上载过程中报错怎样处理? *系列文章从白领蜕变之旅(一)-具总览 https:www.jianshu.comp2bd3f90206ec从白领蜕变之旅(二)-重温Excel催化剂经典 https:www.jianshu.compcb89929bb8ae 「ETL」从白领蜕变之旅(三)-除了Excel催化剂之外PowerQuery值得期待 https:www.jianshu.compd154b09c881d「ETL」从白领蜕变之旅 https:www.jianshu.comp7ca5a3785bd0「ETL」从白领蜕变之旅(五)-使用dotNET脚本实现SSIS无限扩展 https:www.jianshu.comp8de014b1f957

    9920

    ETL」从白领蜕变之旅(七)-将Excel(PowerQuery+VBA)的能力嫁接到SSIS中

    ETL过程中,除了常规的规范整的关系库之外,很大一部分来源于用户自行生产的Excel源,此部分最容易产生脏乱差的现象。 *系列文章从白领蜕变之旅(一)-具总览 https:www.jianshu.comp2bd3f90206ec从白领蜕变之旅(二)-重温Excel催化剂经典 https:www.jianshu.compcb89929bb8ae 「ETL」从白领蜕变之旅(三)-除了Excel催化剂之外PowerQuery值得期待 https:www.jianshu.compd154b09c881d「ETL」从白领蜕变之旅 https:www.jianshu.comp7ca5a3785bd0「ETL」从白领蜕变之旅(五)-使用dotNET脚本实现SSIS无限扩展 https:www.jianshu.comp8de014b1f957 「ETL」从白领蜕变之旅(六)-将Python的能力嫁接到SSIS中 https:www.jianshu.comp033342b02dae

    9820

    ETL」从白领蜕变之旅(五)-使用dotNET脚本实现SSIS无限扩展

    在前面一文中,正式引出了SSIS专业ETL具,笔者仅能作引路作用,未能使用文章的方式给大家写出更多的入门级的文章,希望读者们可以自行根分享的学习资源自行完成入门及进阶的学习。 实际演示本篇只是导读类,并非要手把手教会大家,读者们仅需了解下SSIS的功能扩展边界,评估此具能够给自己的方案做到何种程度,真正要学习时,建议仍然需要按步就班,从低到高地不断地进步。 ,给大家带来在SSIS环境下调用百度AI接口,让非结构化的转换为可分析的结构化供下游Excel、PowerBI等分析具使用。 *系列文章从白领蜕变之旅(一)-具总览 https:www.jianshu.comp2bd3f90206ec从白领蜕变之旅(二)-重温Excel催化剂经典 https:www.jianshu.compcb89929bb8ae 「ETL」从白领蜕变之旅(三)-除了Excel催化剂之外PowerQuery值得期待 https:www.jianshu.compd154b09c881d「ETL」从白领蜕变之旅

    6610

    图像标注,三倍加速:谷歌AI新方案,的福音 | Demo可玩耍

    标注,可能是AI模型训练里最艰巨的一个部分了。计算机视觉首当其冲,标注图像需要投入大量人力。比如,在Coco-Stuff集里,标好一幅图需要19分钟,164,000幅就超过5万小时了。 谷歌AI把这项研究称作“尝试加速标注的第一步”,也即将在ACM MM 2018大会上演示这一步。怎么用呢?

    25220

    ETL」从白领蜕变之旅(三)-除了Excel催化剂之外PowerQuery新物种同样值得期待

    在自助式BI时代以前,Excel级别的ETL作,非常低效,动不动就要启用VBA来完成一些常见的需求,自带的原生功能,未能满足大量的繁琐ETL刚需功能。 在Excel2010后,PowerQuery以插件的形式横空出现,并最终在Excel2016中得以深度内置,是一款非常难得的轻量化ETL具。 PowerQuery一个很深入的集成性在于,其加载的过程中,原生地开发其以Excel智能表的形式加载出来,并且以连接的方式和源和加过程相连接,所以非常好的体验在于源更新后,只需刷新一下结果表即可按原来配置过的逻辑对进行更新 是轻量级别的中小型ETL场景中非常好用的具,结合Excel催化剂的功能,实现双方的互补,能够给广大普通Excel用户们带来非常大的生产力提升。 *系列文章从白领蜕变之旅(一)-具总览 https:www.jianshu.comp2bd3f90206ec从白领蜕变之旅(二)-重温Excel催化剂经典 https:www.jianshu.compcb89929bb8ae

    8620

    ,也能移动办公了:目标检测标注App上线Google Play,分分钟创建私人

    白交 发自 凹非寺 量子位 报道 | 公众号 QbitAI想要快速建立目标检测模型,建立自己私人集吗?现在用手机就可以做到。 最近,Reddit上介绍了这样一款移动版边框标注具Manthano,不到12小时,就获得600+热度。你可以随时随地,分分钟创建目标检测集。 创建集,通常来讲,主要包括3个步骤:1、收集图像2、注释图像3、下载注释基于此,这个名为ManthanoAI的团队就开发了这款具,目前可以在Google Play上免费下载。? 创建步骤创建集的第一步——上传图像。就跟平常的App一样,要么直接拍照,要么从相册中提取。拍照之后,就直接储存在了这个界面上。?接下来就到了「注释图像」的阶段。? 这样,你的私人集就完成了。ManthanoAI团队?这个团队总部设在瑞士,有两位创始人,Anes Prasovic和Marc Willhaus,他们分别获得理学和学硕士学位。

    16340

    聊聊通常构建指标体系,告别初级

    因此今天我会先讲解如何构建指标体系,接着再谈谈分析方法,从这两方面分享我所掌握的分析有关的知识。?首先是指标体系。 在我们日常的作、项目中,往往已经有了一套成熟的指标体系,一般用不着我们去从零开始构建指标体系,但这并不意味着我们不需要这项能力,因为这是区分你和广大“”的关键所在。 网易直播课内容详情1月19日 20:00&职场晋升必备:制作酷炫报表,4步带你学习可视化场景具:用Tableau学习如何管理流程处理: 利用业务拆解找到指标、进行可视化学习成果:高效的对驱动型业务作出精准决策实战案例 :使用RSI指标模型做买卖点搜索、交易回溯实战案例:分析A股模型,制定投资策略1月21日 20:00&量化交易进阶:0基础用Python搭建量化分析平台场景具:利用pandas具分解KDJ指标构成流程处理 : 交易爬取,业务场景分析建模和可视化分析结果:用KDJ指标模型对比特币行情买卖点搜索&交易回溯实战项目:掌握根和分析具寻找虚拟货币买卖原理他们每周都会定期分享一些干货供大家学习参考,对学习很有帮助

    9510

    科危险!公科学家也一样

    似乎可以将CDS看作公科学家概念的延续,这个概念背后的想法是:技术辅助具已经非常先进,自动化调参具的出现、各种MOOC自学平台上课程和实验室层出不穷,所以现在,如果付出足够多的学习时间,似乎所有人都可以迅速具备收集和分析的能力 不断增长的职场缺口下,雇佣这一类公科学家,是许多大公司面临“人荒”困境,寄予厚望的解决方案。大批非相关专业出身、靠着自我培训和技术具成长起来的公科学家,开始涌入这个领域。 草根公科学家的特征?那么,“草根”出身的公科学家有什么特点呢? “草根”科学家有风险“草根”公科学家越来越多,他们开始不止从事最基本的收集和分析作,也开始承担的预测等核心作。 “高质量的仍然非常重要”,针对“公科学家”,全美排名第四的CTO、天睿公司首席技术官、全球仓库技术专家Stephen Brobst告诉大文摘,现在尽管分析具越来越智能,但他们的使用前提依然是没有偏向

    19720

    洛谷P3954 成绩【

    题目背景已修复题目描述牛牛最近学习了C++入门课程,这门课程的总成绩计算方法是:总成绩=作业成绩×20%+小测成绩×30%+期末考试成绩×50%牛牛想知道,这门课程自己最终能得到多少分。 输入输出格式输入格式:输入文件只有1行,包含三个非负整A、B、C,分别表示牛牛的作业成绩、小测成绩和期末考试成绩。相邻两个之间用一个空格隔开,三项成绩满分都是100分。 输出格式:输出文件只有1行,包含一个整,即牛牛这门课程的总成绩,满分也是100分。 说明对于30%的,A=B=0。对于另外30%的,A=B=100。对于100%的,0≤A、B、C≤100且A、B、C都是10的整倍。

    59850

    王建业大的范畴、关键问题与实践

    探索走出符合国情的业大自主之路近年来,随着德国业4.0和美国业互联网为代表的新业革命深入发展,以及“中国制造2025”、“互联网+”行动计划与“促进大发展行动纲要”的颁布实施,业大得到了越来越多的关注 业大三大来源 企业信息系统、装备物联网和企业外部互联网是业大的三大来源企业信息系统存储了高价值密度的核心业务。 由企业信息化、装备物联网和外部互联网汇聚而成的业大,蕴藏着巨大价值。例如,通过分析用户使用改进产品,通过分析现场测量提高件加水平,通过进行产品健康管理等。 装备物联网质量堪忧,某大型制造企业1个月的状态中,无效况(如盾构机传回了程车况)、重名况(同 一状态况使用不同名字)、时标混乱(当前时间错误或时标对不齐)等质量问题约30%。 业大实施程案例 业大分析提升程装备服务保障水平。这里分享两个我们和国内企业合作实施的程案例。案例1业大提供故障分析新手段液压系统是程机械的关键部件。

    49460

    NLP 的乐园

    开源的金融投资提取具 github88. 文本自动摘要库TextTeaser: 仅支持英文 github89. 人日报语料处理具集 github90. 中文NLP增强(EDA)具 github 英文NLP增强具 github 一键中文增强具 github104. 基于医药知识图谱的智能问答系统 github105. CMRC 2018集是哈大讯飞联合实验室发布的中文机器阅读理解。根给定问题,系统需要从篇章中抽取出片段作为答案,形式与SQuAD相同。121. OpenCLaP:多领域开源中文预训练语言模型仓库 github包含如下语言模型及百度百科事文书BERT bert-base 全部事文书 2654万篇文书 22554词 370MB刑事文书BERT 人日报语料库处理具集 github275. stanza:斯坦福团队NLP具 github可处理六十多种语言276.

    10930

    让大更好服务

    生领域,每一刻每一秒,都有海量的产生,如何收集、分析、运用、管理好这些,让大更好地服务生,是摆在政府部门面前的一个重大课题。 近日,中共中央政治局就实施国家大战略进行第二次集体学习。习近平总书记在讲话中指出,要运用大促进保障和改善生。大在保障和改善生方面大有作为。大可以为政策的制定和实施提供依托。 现在凡事讲究个“精准”,大的发展为“精准”的实现创造了条件。哪些地方是生的痛点、堵点和难点?社会保障的覆盖在哪些方面还有所缺失?公共服务在哪里还有改善的空间? 政府部门掌握的许多,还应该更多向公众开放,方便社会使用,激发创业创新的活力。要让大更好地服务生,就要扎实地推进信息基础设施建设。基础打不好,一切都是空中楼阁。 审时度势、精心谋划、超前布局、力争主动,大才能更好地服务生、造福社会,成为我们美好生活的有力支撑。

    59550

    苏宁发布大具“超市”,人日报推出新栏目读“两会” | 大24小时

    猿导读金融大服务平台“知微云”完成千万元融资;贵交所与人日报共同推出《国策说》,用大的方式说两会;苏宁推出大智能具“超市”,聚焦营销市场……以下为您奉上更多大热点事件 作者 | abby一、贵交所与人日报共同推出《国策说》,用大的方式说两会随着本届两会的召开,大已经连续四次进入政府作报告。 其中,贵阳大交易所与人日报再次“联手”,共同推出了大解读节目《国策说》,该节目主要依托于贵阳大交易所海量的资源,以及人日报作为老牌媒体的行业优势,利用大解读每周三国务院常务会议出台的政策 二、苏宁推出大智能具“超市”,聚焦营销市场在日前举办的苏宁易购2017合作伙伴大会暨418大促动员会上,苏宁方面正式推出了大智能具“超市”。 六、百度云与生银行合作,并为其提供云端风控具体系日前,百度云宣布与生银行正式达成战略合作关系,根签订的协议显示,未来百度云将利用自身在云计算、大以及人智能等方面的技术优势,为生银行提供其信贷企业的风险管理和预警服务

    46130

    看中国!透视国表情

    在网聊越来越重要的年代,表情包当仁不让的成为“沟通神器”,打破尬聊的沉寂,一起来看看中国人的表情大,你最喜欢用的表情是哪一个?你觉得男生和女生相比谁更喜欢发表情呢????

    28080

    学NoSQL之KV类型库Redis

    学NoSQL之KV类型库Redis0.导语每个人都应该懂点NoSQL知识;每个人都应该学点Redis知识;每个人都应该看一下这篇文章;Lets Go,发车了,第一弹:Redis的字符串类型使用。 任意一个字符xxx为0-15编号,代码库编号redis-cli -n xxx 例如:light@city:~bigdataprojsoft$ redis-cli -n 1127.0.0.1:6379 redis-cli -n 2127.0.0.1:6379> keys *(empty list or set)127.0.0.1:6379> quit flushdb与flushall区别:flushdb只会清空当前库 bigdataprojsoft$ light@city:~bigdataprojsoft$ redis-cli -n 1127.0.0.1:6379> keys *1) k1 flushall会清空所有库 6379> quitlight@city:~bigdataprojsoft$ redis-cli -n 1127.0.0.1:6379> keys *(empty list or set) select库之间切换

    22820

    相关产品

    • 数据脱敏

      数据脱敏

      数据脱敏(Data Masking,DMask)是一款敏感数据脱敏与水印标记工具,可对数据系统中的敏感信息进行脱敏处理并在泄漏时提供追溯依据,为企业数据共享、迁移、分发提供安全保护措施。

    相关资讯

    热门标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      扫码关注云+社区

      领取腾讯云代金券