使用 BigQuery Python 客户端库查询公共数据集

打开 Cloud Shell Editor

1. 在 Cloud Shell 中，创建新的 Python 项目和文件：

   mkdir bigquery-python-quickstart \
       && touch \
       bigquery-python-quickstart/app.py
   

   此命令会创建一个名为 bigquery-python-quickstart 的 Python 项目和一个名为 app.py 的文件。

2. 打开 Cloud Shell 编辑器：

   cloudshell workspace bigquery-python-quickstart
   

如需了解如何准备执行查询操作所需的文件，请点击下一步。

准备执行查询操作所需的文件

1. 如需在 Cloud Shell 编辑器中打开终端，请点击打开终端。

2. 打开项目目录：

   cd bigquery-python-quickstart
   

3. 安装 Python 版 BigQuery 客户端库：

   pip install --upgrade google-cloud-bigquery
   

   输出类似于以下内容：为了简化输出，此处省略了数行代码。

   Installing collected packages: google-cloud-bigquery
   ...
   Successfully installed google-cloud-bigquery-3.9.0
   ...
   

如需了解如何在 BigQuery 中查询公共数据集，请点击下一步。

在 BigQuery 中查询公共数据集

1. 点击打开编辑器。

2. 在探索器窗格中，找到您的 BIGQUERY-PYTHON-QUICKSTART 项目。

3. 点击 app.py 文件以将其打开。

4. 如需针对 bigquery-public-data.stackoverflow 数据集创建查询以返回前 10 个最常查看的 Stack Overflow 页面及其查看次数，请将以下代码复制到 app.py 文件中：

   from google.cloud import bigquery
   
   
   
   def query_stackoverflow() -> None:
       client = bigquery.Client()
       results = client.query_and_wait(
           """
           SELECT
             CONCAT(
               'https://stackoverflow.com/questions/',
               CAST(id as STRING)) as url,
             view_count
           FROM `bigquery-public-data.stackoverflow.posts_questions`
           WHERE tags like '%google-bigquery%'
           ORDER BY view_count DESC
           LIMIT 10"""
       )  # Waits for job to complete.
   
       for row in results:
           print("{} : {} views".format(row.url, row.view_count))
   
   
   if __name__ == "__main__":
       query_stackoverflow()

5. 点击打开终端。

6. 在终端运行 app.py 脚本。如果系统提示您授权 Cloud Shell 并同意相应条款，请点击授权。

   python app.py
   

   结果类似于以下内容：

   https://stackoverflow.com/questions/35159967 : 170023 views
   https://stackoverflow.com/questions/22879669 : 142581 views
   https://stackoverflow.com/questions/10604135 : 132406 views
   https://stackoverflow.com/questions/44564887 : 128781 views
   https://stackoverflow.com/questions/27060396 : 127008 views
   https://stackoverflow.com/questions/12482637 : 120766 views
   https://stackoverflow.com/questions/20673986 : 115720 views
   https://stackoverflow.com/questions/39109817 : 108368 views
   https://stackoverflow.com/questions/11057219 : 105175 views
   https://stackoverflow.com/questions/43195143 : 101878 views
   

您已成功使用 BigQuery Python 客户端库查询公共数据集。

为避免系统向您的账号收取费用以及了解后续步骤，请点击下一步。