Python Series
Import BigData from Google BigQuery
A Tutorial in Bahasa
Saya ingin berbagi mengenai tutorial meng-import dataset dengan ukuran sangat besar dan juga dataset yang berasal dari Google BigQuery. Semoga artikel ini dapat membantu pembaca yang sedang berkutat mengenai hal ini.
Import Bigdata easily from local google drive
Pada contoh berikut, saya mempunyai beberapa file berukuran cukup besar yang telah diimport sebelumnya ke local gdrive dan disimpan di folder My Drive/Kemenkes-Data Analyst/*namafile. File tersebut kemudian di-import ke dalam Google Colaboratory dengan metode partisi dataset menggunakan function chunk dan disimpan dalam variabel output. Lalu keseluruhan partisi data tersebut digabungkan dengan function concat dan disimpan dalam variabel trips.
Bila hanya ingin mengunduh sebuah file saja, maka cukup menuliskan code sebagai berikut:
Import Bigdata from Google BigQuery
Sebelumnya, dibutuhkan akun untuk masuk Google BigQuery terlebih dahulu dan membuat project. Nantinya, dataset dapat di-import melalui project tersebut. Dalam hal ini, data yang akan diunduh adalah `bigquery-public-data.new_york_citibike.citibike_stations` dan disimpan dalam variabel df. Sementara itu, project pada Google BigQuery adalah my-first-project-318200.
Jika hanya ingin meng-import sampel data saja (tidak seluruh baris) dapat menggunakan code sebagai berikut:
Selamat mencoba…
