如何在BigQuery中创建无超时的getQueryResults作业？
在BigQuery中创建无超时的getQueryResults作业，可以通过以下步骤实现：
- 首先，确保你已经具备使用BigQuery的权限，并且已经创建了一个项目。
- 打开Google Cloud Console（https://console.cloud.google.com/）并登录你的账号。
- 在Cloud Console中，选择你的项目。
- 在导航菜单中，找到并点击"BigQuery"。
- 在BigQuery的界面中，点击左侧导航栏中的"查询编辑器"。
- 在查询编辑器中，输入你的SQL查询语句。
- 在查询编辑器的右上角，点击"查询设置"按钮。
- 在查询设置中，找到"作业配置"部分。
- 在"作业配置"中，点击"高级选项"。
- 在高级选项中，找到"查询超时（秒）"选项。
- 将"查询超时（秒）"的值设置为0，表示无超时。
- 点击"运行查询"按钮，开始执行你的查询。
通过以上步骤，你可以在BigQuery中创建一个无超时的getQueryResults作业。这样，你的查询将不会受到时间限制，可以执行较长时间的查询操作。请注意，无超时的作业可能会消耗更多的资源和时间，因此请谨慎使用。
相关·内容
1回答
如何在BigQuery中创建无超时的getQueryResults作业？
google-bigquery
使用Java API查询带有异步作业的数据的BigQuery 表明，如果我们调用jobs.getQueryResults(jobId)而不超时，就不需要轮询结果。但是，根据作业文档，默认超时时间为10秒。
我的问题是，调用getQueryResults而不超时的方法是什么。我应该放一个非常大的数字作为超时参数，还是参数应该是0？
浏览 6提问于2016-08-02得票数 2
回答已采纳
1回答
可以在bigquery控制台中链接到作业吗？
google-bigquery
如果我在响应中使用REST API (即bigquery.googleapis.com)执行BigQuery作业，我会得到如下所示的selfLink： https://bigquery.googleapis.com/bigquery/v2/projects/my-project/jobs/job_0123456789ABCDEF?location=EU 在UI中(即console.cloud.google.com)我可以在项目的查询历史中看到完全相同的作业： ? 是否可以使用该API响应中的信息并构造一个URL，以允许用户在浏览器中访问该URL，并在UI中被直接带到有关该查询的信息？
浏览 13提问于2021-04-15得票数 0
回答已采纳
2回答
以预定义的顺序运行多个云sql和bigquery查询的选项有哪些
google-cloud-platform、google-bigquery
我需要在GCP BigQuery和GCP CloudSql之间执行定期数据清除和数据加载操作。这涉及到在GCP BigQuery和GCP cloud SQL中以预定的顺序运行多个查询，并在后续查询中使用早期查询的查询结果。我正在考虑以下几个选项
Option1 :使用使用“联合查询”()的BigQuery“计划查询”。这是很好的，因为在gcp cloud SQL数据库中触发“只读”查询，并在gcp BiqQuery中运行多个查询。但是，由于我的操作涉及从GCP云SQL中清除数据，因此联邦查询被排除在外。
选项2:我正在考虑的另一个选项是使用gcp计算linux引擎VM作为我的控制器，以执行跨g
浏览 2提问于2021-03-02得票数 0
5回答
如何在上设置BigQuery的截止日期
google-app-engine、google-bigquery
我有一个程序，它调用BigQuery获取数据。
查询通常需要3-4.5秒，很好，但有时需要超过5秒并抛出此错误：
DeadlineExceededError: API调用urlfetch.Fetch()花了很长时间才做出响应，并被取消。
此显示截止日期和不同类型的截止日期错误。
是否有办法将BigQuery作业的截止日期设定在5秒以上？无法在BigQuery API文档中找到它。
浏览 0提问于2014-07-16得票数 5
回答已采纳
1回答
使Job创建的BigQuery临时表更快地读取大型数据的最佳方法
java、google-cloud-platform、google-bigquery
我试图使用BigQuery中的Java库对表执行查询。我创建一个作业，然后使用job.getQueryResults().iterateAll()方法获得作业的结果。
这种方式是可行的，但是对于600 K这样的大数据，大约需要80到120秒的时间。我看到BigQuery在40到45K的批处理中获取数据，每批大约需要5-7秒。
我想更快地获得结果，我在互联网上发现，如果我们能够从作业中获得BigQuery创建的临时表，并且读取表中的数据，如果速度非常快的话，可以从该表读取数据，但是在BigQuery API(使用版本: 1.124.7)中，我不这么认为。是否有人知道如何在Java中这样做，或者如
浏览 3提问于2021-01-07得票数 0
回答已采纳
2回答
如何避免达到每个用户10秒的限制
google-bigquery
我们并行运行多个短查询，并达到10秒的限制。
根据文档，如果我们达到每个项目每个用户10个API请求的限制，可能会发生节流。我们发送一个"start query job"，然后调用"getGueryResutls()“，超时时间为60,000，但是，我们在大约1秒后得到响应，我们在JSON响应中查找作业完成，因为它不在那里，所以我们需要再次发送GetQueryResults()多次并达到阈值，这会导致错误，而不是速度减慢。示例代码如下所示。
我们的问题是: 1.什么是“用户”它是一个应用程序引擎用户，它是我们可以放在连接字符串或查询本身中的用户id吗? 2.它真的是每个
浏览 1提问于2013-07-03得票数 0
1回答
JAVA SDK中的谷歌BigQuery代理设置
java、google-bigquery、gcloud-java
我正在尝试使用谷歌BigQuery软件开发工具包进行查询。它在我的本地运行得很好，但在VM中它总是超时。我最好的猜测是代理设置，我尝试了下面的方法来设置它，但SDK客户端似乎无法获取它 System.setProperty("java.net.useSystemProxies", "true");
System.setProperty("http.proxyHost", "http://xxxxx");
System.setProperty("http.proxyPort", "3
浏览 46提问于2020-07-28得票数 0
1回答
我的BigQuery查询中的条件语句被忽略
node.js、google-bigquery
我有一个包含几列的简单BigQuery表。其中一列被命名为my_id (类型为STRING)。我像这样查询我的BigQuery数据集： import * as bq from "@google-cloud/bigquery";
const bqdb = new bq.BigQuery();
// ...
const projectId = 'my_project';
const datasetId = "my_dataset";
const tableId = "my_table";
const dbId = [proje
浏览 37提问于2021-11-16得票数 0
回答已采纳
2回答
如何在将行流到BigQuery中时指定超时？
php、google-bigquery
基本上，我想在系统的一个非常关键的部分将一些非关键数据流到BigQuery中。
我希望指定大约2秒的最大超时时间，因为如果存在任何连接问题，或者如果BigQuery不可用，我不希望阻塞该进程太长时间(以前已经发生过这种情况，但我不希望经常发生这种情况)。
我使用google/cloud库连接到BigQuery，基本上使用以下代码：
use Google\Cloud\BigQuery\BigQueryClient;
/**
* Stream a row of data into your BigQuery table
* Example:
* ```
* $data = [
*
浏览 14提问于2017-06-23得票数 2
回答已采纳
1回答
服务器如何停止已在处理的请求？
java、request、response、spring-cloud、kill-process
我的服务器收到一个请求，并且已经处理了很长一段时间。我怎么才能阻止它？例如，我想停止所有已经处理了2秒的请求，并抛出一个异常。
我使用的是spring cloud。
浏览 17提问于2018-12-05得票数 0
1回答
错误:在作业配置中将allowLargeResults设置为true后仍会出现错误？
javascript、node.js、google-bigquery
我在代码中编写了bigquery。我想得到更大的结果。
我还设置了属性allowLargeResult:true，但仍然收到错误：响应太大，无法返回。考虑在职务配置中将allowLargeResults设置为true。有关更多信息，请参见http s://cloud.google.com/bigquery/troubleshooting-errors。
这是我的Node.js代码：
var google = require('googleapis');
var bigquery = google.bigquery('v2');
var authClient =
浏览 4提问于2016-10-17得票数 2
回答已采纳
1回答
将数据从RDBMS加载到Bigquery
google-bigquery
我有一个App Engine调度作业，它每天运行，并在PostgreSQL表(托管在gcp中，而不是cloudsql中)中查找满足归档条件的行。如果满足条件，它将连接到BigQuery并将数据流式传输到大型查询。每天，有资格归档的记录很少，我们会写信给BigQuery。这是一种经济有效的方法吗?或者我们可以尝试使用Cloud Functions加载数据？https://cloud.google.com/solutions/performing-etl-from-relational-database-into-bigquery
浏览 10提问于2020-01-31得票数 0
1回答
google iot的google cloud platform console中的"create registry“按钮在哪里？
api、google-cloud-platform、cloud、iot
在谷歌IoT云https://cloud.google.com/iot/docs/how-tos/devices的文档中，它声称我应该转到控制台：https://console.cloud.google.com/iot/registries并单击create registry，但没有执行此操作的按钮。我只能在控制台中使用gcloud iot命令执行此操作。 我试过点击控制台，但发现很难导航。我在哪里可以看到我注册的设备？
浏览 18提问于2019-06-15得票数 0
回答已采纳
1回答
构建超时，不能增加超时
google-cloud-build
我正在通过Cloud Build部署到Kubernettes。每隔一段时间，构建就会超时，因为它超过了十分钟的内置时间。我想不出怎么增加这个时间。我在触发器中使用了内联构建配置。它看起来像这样 steps:
- name: gcr.io/cloud-builders/docker
args:
- build
- '-t'
- '$_IMAGE_NAME:$COMMIT_SHA'
- .
- '-f'
- $_DOCKERFILE_NAME
dir
浏览 14提问于2021-01-26得票数 0
回答已采纳
2回答
无法从Eclipse中的本地App实例连接到BigQuery
java、google-app-engine、google-bigquery
我是Google的新手，我正试着阅读一些教程，看看这将如何为我的组织工作。我们正在考虑将我们的一些数据放入BigQuery，并将我们的一些Web应用程序转换为App，这将需要访问BigQuery数据。
我正在使用java-docs-示例-主代码，特别是bigquery/cloud-client/src/main/java/com/example/bigquery/SimpleApp.java。
我可以在命令行中使用
mvn :java -Dexec.mainClass=com.example.bigquery.SimpleAppMain
我将代码合并到App中，我正在Eclipse中运
浏览 4提问于2017-05-15得票数 0
1回答
云调度程序作业访问HTTPS端点并记录失败(状态502)，但服务器正在返回成功响应(状态200)
firebase、firebase-hosting、google-cloud-run、google-cloud-scheduler
我有一个云调度程序任务，应该每小时点击我的API来更新一些价格。这些作业大约需要80秒才能运行。
它所做的事情如下：
POST https://www.example.com/api/jobs/update-prices
我的应用程序托管在Firestore上，/api/jobs/**由名为server-jobs的云运行服务处理。
firebase.json
{
"source": "/api/jobs/**",
"run": { "serviceId": "server-jobs", "regio
浏览 1提问于2021-03-08得票数 3
回答已采纳
1回答
在代码中更改运行ExpressJS服务的Google Cloud函数的执行超时？
express、timeout、google-cloud-functions
如何在代码中更改运行ExpressJS服务的Google Cloud函数的执行超时？ 我找到了Google函数的文档，用于更改一个简单函数的默认超时时间60秒。 https://cloud.google.com/functions/docs/concepts/exec exports.afterTimeout = (req, res) => {
setTimeout(() => {
// May not execute if function's timeout is <2 minutes
console.log('Function runn
浏览 18提问于2019-03-06得票数 0
2回答
查尔斯不工作，弹出“允许”或“否认”不来
charles-proxy
1.使用Charles 4.2.6版本
设置：
2.代理设置中的端口号< Proxy < Http proxy :8888
3.
4.SSL代理设置< SSL Pro行<启用SSL Pro行<已添加
5.在访问控制设置中添加VPN ip地址
6. windows系统和my iOS设备中安装和信任Charles root证书(XR版本:13.2.3)
7.安装我的测试版本
8.在配置设备代理中更改ip地址(使用VPN IP地址和Charles中显示的正常IP地址)端口8888
9.启动测试应用程序
10.流量并不来自于Charles的测试应用程序。
11.多次试图卸
浏览 0提问于2020-05-13得票数 4
1回答
如何为Power查询设置最大运行时/超时？
excel、timeout、powerquery、m
是否有一种方法可以在Power查询中设置最大运行时或超时因子，以便在指定的时间段后，无论查询是否成功执行，查询都会自行终止？
这对我来说很重要，因为我在我的工作场所构建了各种各样的查询，这些查询通常运行良好(就像我每天运行它，几个月和几年没有问题一样)，但偶尔它们会挂起(可能是因为在服务器负载很重时，服务器上的另一个进程发生冲突)，并无限期地在服务器上发出读取请求--有一次，it告诉我，他们在几个小时内记录了超过700万条从我的机器到数据库的数据。在某些情况下，这导致服务器崩溃，导致大量停机。
因此，我想知道是否有任何设置，或任何东西，我可以构建到查询本身，以确保它在一段时间后终止。
我精通M
浏览 0提问于2018-08-07得票数 9
1回答
从发布订阅用BigQuery编写查询
google-bigquery、google-cloud-functions、google-cloud-pubsub
我需要一些帮助。 我正在接收包含PubSub主题中数据的消息，我需要在BigQuery中插入从消息中获得的数据，并使用后台云函数(发布/订阅)进行查询…… 我设法做到的是： /**
* Triggered from a message on a Cloud Pub/Sub topic.
*
* @param {!Object} event Event payload.
* @param {!Object} context Metadata for the event.
*/
exports.insertBigQuery = (message, context) => {
浏览 6提问于2021-01-11得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
