Bigquery.go导出作业比WebGUI慢得多

Bigquery.go导出作业比WebGUI慢得多,第1张

Bigquery.go导出作业比WebGUI慢得多

WEB UI通常具有轮询机制来检查作业何时完成,因此您可能会看到更长的时间。通常,导出到GCS的文件在WebUI中显示的时间早于作业实际完成的时间。

为了确保并查看确切的时间安排,请使用

cli tool
获取最新的工作:

bq  ls -j -a --max_results=15

运行此命令将显示一个包含作业ID和相应时间的表格。

    jobId     Job Type    State      Start Time      Duration --------------------------------- ---------- --------- ----------------- ----------  bquijob_1864e679_15a84d8878a      query      SUCCESS   28 Feb 07:11:06   0:00:04  bquijob_770b512_15a84d8122c       query      FAILURE   28 Feb 07:10:35   0:00:00  bquijob_de0df03_15a84d6a4fa       query      FAILURE   28 Feb 07:09:02   0:00:00  bquijob_52c4f7d7_15a84d660e6      query      FAILURE   28 Feb 07:08:44   0:00:00  bquijob_76a2c1be_15a84d5e769      query      FAILURE   28 Feb 07:08:13   0:00:00  bquijob_7f51dde5_15a84d55afb      query      SUCCESS   28 Feb 07:07:41   0:00:08  bquijob_34f25864_15a84d50503      query      SUCCESS   28 Feb 07:07:18   0:00:08  job_Ca0cuRTAjY7MEHAs7vTJMxtVYTs   query      SUCCESS   28 Feb 07:00:47   0:00:09  job_hHfmcdwyBsPsYF5dDvvOdR1Rmd0   load       SUCCESS   28 Feb 07:00:26   0:00:20  job_mkiLf_mFHLKSplGJOtg-XDKzvv4   load       SUCCESS   28 Feb 02:52:50   0:00:02  job_3RsPvttxWwv3SzVoOI9Cv_2yWtA   query      SUCCESS   27 Feb 21:18:40   0:00:08  job_JLsqJO0NEIlKNac6jkDWbwneGMg   extract    SUCCESS   27 Feb 11:35:04   0:00:17  job_KOS7vKX4aX0FNbK6dibE7cxzcQA   query      SUCCESS   27 Feb 11:33:44   0:00:37  bquijob_44046bec_15a802f703a      query      SUCCESS   27 Feb 09:27:48   0:00:07  job_2qQ6YSWeXaP2y2doONQJsIoga3c   query      SUCCESS   27 Feb 08:53:20   0:00:06

您将可以通过这种方式检查提取作业DURATION。万一您确认确实存在问题,请尽快将此类表格发回您的问题中,Google工程师会尽快对其进行检查。但是,如果没有适当的细节,我们只能假设您的测量是错误的。



欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/zaji/5001486.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2022-11-14
下一篇2022-11-14

发表评论

登录后才能评论

评论列表(0条)

    保存