前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >踩坑 | power bi混合模型部署失败的问题

踩坑 | power bi混合模型部署失败的问题

作者头像
做数据的二号姬
发布2023-09-06 13:10:46
2500
发布2023-09-06 13:10:46
举报
文章被收录于专栏:HR大数据

13

2023-08

踩坑 | power bi混合模型部署失败的问题

因为最近踩了太多坑了,所以准备开一个新的系列,分享一些最近新学(cai)到(keng)的东西,更新不定期~

LEARN MORE

图片由海艺AI绘制

最近被各种延迟的问题搞得比较惨,果然一个性价比系数高达2的工作(清闲)没有那么容易干——时不时就在考验我的知识储备。

非要说的话,还是因为数据流程本身比较复杂,涉及的技术细节太多了,有很多都是我知识的盲区或者我曾经以为应该是XX结果经过踩坑之后发现实际根本不是这样的。

别的细节就不说了,总之就是最近接手了一个非常复杂的BI看板,复杂程度怎么理解呢,也就六七个人的团队花了三个月开发上线的东西。由于没有任何参考加上摸着石头过河的缘故,近期遇到了很多让我很抓狂的报错。

在这个项目中,实际用到的power bi连接方式是import+direct query的混合模型,这种方式相对来说还是比较冷门的,我对这玩意也称不上是非常熟悉。只能说是,这个东西我知道可以,也简单的用过,但是更深层次的东西,完全不知道。

因为绝大多数power bi的用户实际都没有用到过部署这个功能,所有我简单介绍一下。power bi其实是可以有很严格的开发流程的,也就是可以拆分dev(开发环境)/uat(测试环境)/prd(生产环境)这种。

实际操作也非常简单,正常情况,开发人员通过desktop种点击发布的功能,把报告发布到dev环境(其实就是一个指定的工作区中),然后运维的人员进行代码审核,确认没有问题后在发布的界面,点一下发布按钮就可以了。

因为这个功能用得真的非常少,所以能找到的资料和文档都非常有限,遇到一些稀奇古怪的问题可真的是太闹心了。在经历了无数次报错&测试&打电话给微软的印度老哥之后,总结了一些经验:

  • 如果上一个版本的模型是import的,新版本的模型是direct query的,无法通过管道工具进行部署;
  • 对于混合模型(import+direct query),如果修改了模型结构(新增表、新增字段、修改一对一一对多关系),则无法进行部署;但是修改和新增dax/query,修改页面视觉效果,均可以正常部署;
  • 如果direct query连接的后台表正在执行刷新/数据写入等任务时,发布dataset可能导致管道卡死,发布上线需要尽量避开ETL任务调度时间;
  • 如果开发人员在dev的工作区骚操作删除了已有的报告并从desktop重新上传了一遍,无法进行部署;

对于上面四个无法部署的场景,解决方案也非常的简单粗暴:删掉重来。

对于混合模型修改了模型结构导致发布失败的,直接删除UAT环境的报告,按照新增的方式进行发布即可。需要注意的一点是,一旦发生这种情况,就需要尽量选择用户访问比较少的时间进行操作了。正常做发布的时候,用户是无感知的,但是这种先删后新增的操作,会导致看板在数据集刷新完成前无法正常打开。

对于开发人员骚操作删除了dev环境已有的报告的,操作方式和注意实现和混合模型发布失败的处理方式类似,删除UAT环境的报告,按照新增的方式进行发布即可。唯一要说的可能就是警告开发人员下次不要乱删东西了。

最坑爹的是和后台ETL任务冲突卡死这个问题,遇到了一次,真的是整个人都无语了。电话摇人摇微软中国的团队响应太慢,摇到了印度老哥那边解决。

简单来说,部署卡死就是部署界面一直转圈圈,无法取消也无法部署,并且于此同时,看板页面无法正常打开(一直转圈圈)。直接删掉重来这个办法也不管用,就算把UAT的数据集删掉,发布界面照样转圈圈,发布不了也取消不了。

这种玄学问题我就不想纠结原理了,直接说最终是怎么解决的吧。直接把UAT的工作区从服务器容量中移除,通过本地desktop进行发布,将数据集发布到工作区中,再把UAT的工作区加回到服务器容量中,无法点击部署按钮的问题就解决了。然后把本地上传到UAT工作区的数据集删掉,再通过管道按照新增的方式继续发布,即可彻底解决问题。

因为删掉重发这种操作,都是出现在dev发布uat的过程,然而uat发布prd也会受到这种骚操作的影响——一旦前一个环节玩了这种骚操作,下一个环节也得跟着骚操作,需要再玩一次删掉重发的戏码。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-08-13,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 做数据的二号姬 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
腾讯云 BI
腾讯云 BI(Business Intelligence,BI)提供从数据源接入、数据建模到数据可视化分析全流程的BI能力,帮助经营者快速获取决策数据依据。系统采用敏捷自助式设计,使用者仅需通过简单拖拽即可完成原本复杂的报表开发过程,并支持报表的分享、推送等企业协作场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档