Cách truy vấn BigQuery theo lập trình từ Python mà không có tương tác của người dùng cuối?

Question

Câu hỏi này có vẻ rất đơn giản để trả lời, nhưng sau nhiều ngày nghiên cứu và một số kết thúc chết, tôi dường như không nhận được kết quả truy vấn từ BigQuery mà không cần nhấn mạnh vào OAuth dựa trên người dùng. Có ai có bất kỳ may mắn với điều này? Tôi không sử dụng Google AppEngine cho ứng dụng của mình, nó được lưu trữ trong EC2. Đây là tình huống chính xác:

User wants reporting data --> 
Web server makes queries to BigQuery --> 
Data is transformed for use in WebApp and returned to User. 

Bất cứ khi nào tôi làm theo các ví dụ của Google, tôi sẽ nhận được một trình duyệt web yêu cầu tôi chọn tài khoản Google để sử dụng để xác thực.

Answer 1

Xin lỗi, việc này đang rất khó khăn để tìm thông tin. Bạn đang tìm kiếm những gì được gọi là Service Accounts được ghi lại trong hướng dẫn Authorizing Access to the BigQuery API using OAuth 2.0 của chúng tôi.

Dưới đây là một ví dụ, bằng cách sử dụng Python client library, mặc dù bạn sẽ muốn xem xét các tài liệu tham khảo để biết về việc mua các chứng chỉ thích hợp:

import httplib2 

from apiclient.discovery import build 
from oauth2client.client import SignedJwtAssertionCredentials 

# REPLACE WITH YOUR Project ID 
PROJECT_NUMBER = 'XXXXXXXXXXX' 
# REPLACE WITH THE SERVICE ACCOUNT EMAIL FROM GOOGLE DEV CONSOLE 
SERVICE_ACCOUNT_EMAIL = 'XXXXX@developer.gserviceaccount.com' 

# OBTAIN THE KEY FROM THE GOOGLE APIs CONSOLE 
# More instructions here: http://goo.gl/w0YA0 
f = file('key.p12', 'rb') 
key = f.read() 
f.close() 

credentials = SignedJwtAssertionCredentials(
    SERVICE_ACCOUNT_EMAIL, 
    key, 
    scope='https://www.googleapis.com/auth/bigquery') 

http = httplib2.Http() 
http = credentials.authorize(http) 

service = build('bigquery', 'v2') 
datasets = service.datasets() 
response = datasets.list(projectId=PROJECT_NUMBER).execute(http) 

print 'Dataset list:' 
for dataset in response['datasets']: 
    print '%s' % dataset['datasetReference']['datasetId'] 

Answer 2

tôi đã cùng một vấn đề. Có thể là do bạn không có các quyền cần thiết trong Dự án cho khóa Tài khoản dịch vụ mà bạn đang sử dụng.

Answer 3

Nếu bạn đăng nhập tại địa phương với gcloud:

gcloud auth application-default login 

Sau đó, một thông tin nộp sẽ được lưu trữ trong ~/.config/gcloud /, có thể được nạp với:

from oauth2client.client import GoogleCredentials 
from apiclient.discovery import build 

credentials = GoogleCredentials.get_application_default() 
service = build('bigquery', 'v2') 

Hoặc bạn có thể chỉ cần tải tệp khóa bảo mật BQ trực tiếp bằng:

from google.cloud import bigquery 
client = bigquery.Client.from_service_account_json(path_to_key.json)