我每小时将数据从Azure data Lake Store中的csv文件加载到Azure SQL数据仓库中的表中。加载由SqlServerStoredProcedure数据工厂活动执行,输入数据集是最近一小时收到的csv文件之上的一个外部表。在数据工厂活动监视器中,一切都是绿色的(就绪),数据似乎已按预期加载到目标表中,但在SQL DW的查询活动监视器中,我看到了许多失败的查询。当我查看查询文本时,它看起来好像是SqlServerStoredProcedure活动执行的insert语句失败了,但在这种情况下,我假设数据工厂活动将失败。对吗?
我在Google BigQuery中有一个数据库,其中包含了我的用户活动的百万行(每天有200多万行)。
我创建了一个PHP程序来获得这个数据库的洞察力,其中包含了许多查询,比如每天、每小时和更多的数据统计。
我有两个案子有两个问题:
我试图在2016-11-01和2016-11-10之间找到用户活动的数据,然后我只需要对2016-11-05数据进行细分(数据基本上是查询结果的子集)。这些数据需要每天、每小时或每用户类型进行分类,等等。现在,我在数据库中使用许多查询来对这些数据进行分组,并执行许多数据操作。例如,“从user_activities WHERE date >=‘2016