BigQuery, ๋ฐ์ดํฐ ๋ ์ดํฌ, ์ด์ ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ก ์คํธ๋ฆฌ๋ฐํ๊ธฐ ์ํ ์ด๋ฒคํธ๋ฅผ ์์งํฉ๋๋ค.
์ ๊ท ๊ณ ๊ฐ์๊ฒ๋ Pub/Sub์ ์ฌ์ฉํ ์ ์๋ $300์ ๋ฌด๋ฃ ํฌ๋ ๋ง์ด ์ ๊ณต๋ฉ๋๋ค. ๋ชจ๋ ๊ณ ๊ฐ์๊ฒ๋ ๋ฉ์์ง๋ฅผ ์์ง ๋๋ ์ ๋ฌํ ์ ์๋ ์ ์ต๋ 10GB๊ฐ ๋ฌด๋ฃ๋ก ์ ๊ณต๋๋ฉฐ ํฌ๋ ๋ง์ด ์ฐจ๊ฐ๋์ง ์์ต๋๋ค.
๋ฐ์ดํฐ ์จ์ดํ์ฐ์ค ์๋ฃจ์ ์์๋ฅผ ๋ฐฐํฌํ์ฌ BigQuery ๋ฐ Looker Studio๋ฅผ ์ฌ์ฉํ์ฌ ๋ฐ์ดํฐ๋ฅผ ํ์, ๋ถ์, ์๊ฐํํฉ๋๋ค. ๋ํ ์์ฑํ AI๋ฅผ ์ ์ฉํ์ฌ ๋ถ์ ๊ฒฐ๊ณผ๋ฅผ ์์ฝํฉ๋๋ค.
๋ ธ์ต์ค(no-ops), ๋ณด์, ํ์ฅํ ๋ฉ์์ง ๋๋ ํ ์์คํ
๊ฐ์ ธ์ค๊ธฐ ๋ฐ ๋ด๋ณด๋ด๊ธฐ ๋ชจ๋๋ฅผ ํตํ ์์ ๋ฐ ์์์ ๊ด๊ณ์์ด ์ต์ 1ํ ๋ฉ์์ง ์ ์ก
์ธ๋ถํ๋ ์ก์ธ์ค ์ ์ด ๋ฐ ์์ ์ฌ์ฉ ์ค์ ์ํธํ๋ฅผ ํตํ ๋ฐ์ดํฐ ๋ณดํธ
์ด์
๋๊ธฐ์ ์์ญ ๊ฐ ๋ฉ์์ง ๋ณต์ ๋ฐ ๋ฉ์์ง๋น ์์ ์ถ์ ์ผ๋ก ๊ท๋ชจ์ ์๊ด์์ด ์์ ์ ์ธ ์ ์ก์ ๋ณด์ฅํฉ๋๋ค.
ํํฐ์ ์ด ์๋ ์๋ ํ์ฅ ๋ฐ ์๋ ํ๋ก๋น์ ๋์ ๊ณํ์ด ํ์ ์์ผ๋ฉฐ ์ฒซ๋ ๋ถํฐ ์ํฌ๋ก๋์ ํ๋ก๋์ ์ด ๊ฐ๋ฅํฉ๋๋ค.
BigQuery, ๋ฐ์ดํฐ ๋ ์ดํฌ, ์ด์ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ํผ๋๋ฅผ ์ ๊ณตํ๋ ์ค์๊ฐ ๋ฐ ์ผ๊ด ํ์ดํ๋ผ์ธ์ ์ง์ ์ ์ผ๋ก ๋ณผ๋ฅจ์ ๊ด๊ณ์์ด ์ ์ํ๊ณ ์์ ์ ์ผ๋ก ์๊ท๋ชจ ๋ ์ฝ๋๋ฅผ ์ฐ๊ฒฐํฉ๋๋ค. Dataflow์ ETL/ELT ํ์ดํ๋ผ์ธ์์ ์ฌ์ฉํ ์ ์์ต๋๋ค.
์ฃผ์ ํน์ง
๊ธฐ๋ณธ Dataflow ํตํฉ์ ํตํด ์๋ฐ, Python, SQL์ ์ด๋ฒคํธ ์คํธ๋ฆผ์ ์์ ์ ์ด๊ณ ํํ๋ ฅ ์๊ฒ ๋จ ํ ๋ฒ์ ์ฒ๋ฆฌ ๋ฐ ํตํฉํ ์ ์์ต๋๋ค.
์ ํ์ฌํญ์ธ ํค๋น ์ฃผ๋ฌธ์ ํํฐ์ ์ ํ์๋ก ํ์ง ์์ผ๋ฏ๋ก ์ํ์ ํ์ฅ์ ๊ทธ๋๋ก ์ ์งํ๋ฉด์ ์คํ ์ดํธํ(Stateful) ์ ํ๋ฆฌ์ผ์ด์ ๋ก์ง์ ๊ฐ์ํํฉ๋๋ค.
๊ธฐ๋ณธ ๊ตฌ๋ ์ผ๋ก BigQuery ๋๋ Cloud Storage์์ ์ง์ Pub/Sub์ ์คํธ๋ฆฌ๋ฐ ๋ฐ์ดํฐ๋ฅผ ์์งํ์ธ์.
๊ณ ๊ฐ
์๋ก์ด ์์
Google Cloud ๋ด์ค๋ ํฐ๋ฅผ ์ ์ฒญํ์ฌ ์ ํ ์ ๋ฐ์ดํธ, ํ์ฌ ์ ๋ณด, ํน๋ณ ์ด๋ฒคํธ ๋ฑ์ ์์์ ๋ฐ์๋ณด์ธ์.
์ฌ์ฉ ์ฌ๋ก
Google์ ์คํธ๋ฆผ ๋ถ์์ ์ฌ์ฉํ๋ฉด ๋ฐ์ดํฐ๋ฅผ ์ฒด๊ณ์ ์ผ๋ก ์ ๋ฆฌํ์ฌ ์ ์ฉํ๊ฒ ์ฌ์ฉํ ์ ์์ ๋ฟ๋ง ์๋๋ผ ๋ฐ์ดํฐ๊ฐ ์์ฑ๋๋ ์ฆ์ ํ์ฉํ ์ ์์ต๋๋ค. Dataflow, BigQuery, Pub/Sub๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ๊ตฌ์ถ๋ Google์ ์คํธ๋ฆฌ๋ฐ ์๋ฃจ์ ์ ์ค์๊ฐ ๋น์ฆ๋์ค ์ ๋ณด๋ฅผ ์ป๊ธฐ ์ํด ๋ณผ๋ฅจ ๋ณ๋์ด ์ฌํ ์ค์๊ฐ ๋ฐ์ดํฐ๋ฅผ ์์ง, ์ฒ๋ฆฌ, ๋ถ์ํ๋ ๋ฐ ํ์ํ ๋ฆฌ์์ค๋ฅผ ํ๋ก๋น์ ๋ํฉ๋๋ค. ์ด๋ ๊ฒ ์ถ์ํ๋ ํ๋ก๋น์ ๋ ๋๋ถ์ ๋ณต์ก์ฑ์ด ์ค์ด๋ค๊ณ ๋ฐ์ดํฐ ๋ถ์๊ฐ์ ๋ฐ์ดํฐ ์์ง๋์ด๊ฐ ๋ชจ๋ ์คํธ๋ฆผ ๋ถ์์ ์ด์ฉํ ์ ์์ต๋๋ค.
Pub/Sub๋ ๊ธฐ์กด ์๋น์ค๋ฅผ ํตํฉํ๊ธฐ ์ํ ๋ฉ์์ง ๋ฏธ๋ค์จ์ด๋ก ์๋ํ๊ฑฐ๋ ์ต์ ๋ง์ดํฌ๋ก์๋น์ค์ ๋จ์ ํต์ ๋งค์ฒด๋ก ์๋ํฉ๋๋ค. ํธ์ ๊ตฌ๋ ์ Google Kubernetes Engine ๋๋ Compute Engine์ ์ปค์คํ ํ๊ฒฝ์ด๋ Cloud Functions, App Engine, Cloud Run์์ ์ด๋ฒคํธ๋ฅผ ์๋ฒ๋ฆฌ์ค ์นํ ์ ์ ์กํฉ๋๋ค. ์ง์ฐ ์๊ฐ์ด ์งง์ ํ ์ ์ก์ ์นํ ๋ ธ์ถ์ด ์ต์ ์ด ์๋ ๊ฒฝ์ฐ ์ฌ์ฉํ๊ฑฐ๋ ์ฒ๋ฆฌ๋์ด ๋์ ์คํธ๋ฆผ์ ํจ์จ์ ์ผ๋ก ์ฒ๋ฆฌํ๊ธฐ ์ํด ์ฌ์ฉํ ์ ์์ต๋๋ค.
๋ชจ๋ ํน์ง
์ต์ 1ํ ์ ์ก | ๋๊ธฐ์ ์์ญ ๊ฐ ๋ฉ์์ง ๋ณต์ ๋ฐ ๋ฉ์์ง๋น ์์ ์ถ์ ์ผ๋ก ๊ท๋ชจ์ ์๊ด์์ด ์ต์ 1ํ ์ ์ก์ ๋ณด์ฅํฉ๋๋ค. |
์ด๊ธฐ | 7๊ฐ ์ธ์ด๋ก ๋ ๊ฐ๋ฐฉํ API ๋ฐ ํด๋ผ์ด์ธํธ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๊ฐ ๊ต์ฐจ ํด๋ผ์ฐ๋ ๋ฐ ํ์ด๋ธ๋ฆฌ๋ ๋ฐฐํฌ๋ฅผ ์ง์ํฉ๋๋ค. |
๋จ ํ ๋ฒ ์ฒ๋ฆฌ | Dataflow๋ Pub/Sub ์คํธ๋ฆผ์ ๋จ ํ ๋ฒ์ ์์ ์ ์ด๊ณ ํํ๋ ฅ ์๊ฒ ์ฒ๋ฆฌํฉ๋๋ค. |
ํ๋ก๋น์ ๋ ์๋ ์์ ์๋ | Pub/Sub์๋ ๋ถํ ์ด๋ ํํฐ์
์ด ์์ต๋๋ค. ํ ๋น๋์ ์ค์ ํ๊ณ ๊ฒ์ํ์ฌ ์ฌ์ฉํ๋ฉด ๋ฉ๋๋ค. |
๊ท์ ์ค์ ๋ฐ ๋ณด์ | Pub/Sub๋ HIPAA๋ฅผ ์ค์ํ๋ ์๋น์ค๋ก์ ์ ๋ฐํ ์ก์ธ์ค ์ ์ด์ ์๋ ํฌ ์๋ ์ํธํ๋ฅผ ์ ๊ณตํฉ๋๋ค. |
Google Cloud ๊ธฐ๋ฐ ํตํฉ | Cloud Storage ๋ฐ Gmail ์
๋ฐ์ดํธ ์ด๋ฒคํธ, Cloud Functions ๋ฑ ์๋ฒ๋ฆฌ์ค ์ด๋ฒคํธ ๊ธฐ๋ฐ ์ปดํจํ
์ ์ํ ๋ค์ํ ์๋น์ค ํตํฉ์ ํ์ฉํด ๋ณด์ธ์. |
ํ์ฌ ๋ฐ OSS ํตํฉ | Pub/Sub๋ ๋ฐ์ดํฐ ํตํฉ์ฉ Striim ๋ฐ Informatica์ ํจ๊ป ๋ก๊ทธ์ฉ Splunk ๋ฐ Datadog์์ ํ์ฌ ํตํฉ์ ์ ๊ณตํฉ๋๋ค. ๋ํ OSS ํตํฉ์ Apache Kafka์ฉ Confluent Cloud์ Kubernetes ๊ธฐ๋ฐ ์๋ฒ๋ฆฌ์ค ์ํฌ๋ก๋์ฉ Knative Eventing์ ํตํด ์ด์ฉํ ์ ์์ต๋๋ค. |
ํ์ ๋ฐ ์ฌ์ | ๋ฐฑ๋ก๊ทธ๋ฅผ ํน์ ์์ ๋๋ ์ค๋
์ท์ผ๋ก ๋๊ฐ์ ๋ฉ์์ง๋ฅผ ๋ค์ ์ฒ๋ฆฌํ ์ ์์ต๋๋ค. ๋นจ๋ฆฌ ๊ฐ๊ธฐ๋ก ์ค๋๋ ๋ฐ์ดํฐ๋ฅผ ์ญ์ ํ ์๋ ์์ต๋๋ค. |
๋ฐ๋ ๋ ํฐ ์ฃผ์ | ๋ฐ๋ ๋ ํฐ ์ฃผ์ ๋ ๊ตฌ๋
์ ์ ํ๋ฆฌ์ผ์ด์
์์ ์ฒ๋ฆฌํ ์ ์๋ ๋ฉ์์ง๋ฅผ ์คํ๋ผ์ธ ๊ฒ์ฌ ๋ฐ ๋๋ฒ๊น
์ฉ์ผ๋ก ๋ณ๋๋ก ๋์ด ๋ค๋ฅธ ๋ฉ์์ง๊ฐ ์ง์ฐ๋์ง ์๋๋ก ์ฒ๋ฆฌํฉ๋๋ค. |
ํํฐ๋ง | Pub/Sub๋ ๊ตฌ๋
์์๊ฒ ์ ์ก๋๋ ๋ณผ๋ฅจ์ ์ค์ด๊ธฐ ์ํด ์์ฑ์ ๊ธฐ์ค์ผ๋ก ๋ฉ์์ง๋ฅผ ํํฐ๋งํ ์ ์์ต๋๋ค. |
๊ฐ๊ฒฉ ์ฑ ์
Pub/Sub ๊ฐ๊ฒฉ์ ์๊ฐ ๋ฐ์ดํฐ ๋ณผ๋ฅจ์ ๊ธฐ๋ฐ์ผ๋ก ์ฑ ์ ๋ฉ๋๋ค. ์๋ณ ๋ฐ์ดํฐ์ ์ฒ์ 10GB๋ ๋ฌด๋ฃ๋ก ์ ๊ณต๋ฉ๋๋ค.
์๊ฐ ๋ฐ์ดํฐ ๋ณผ๋ฅจ1 | TB๋น ๊ฐ๊ฒฉ2 |
---|---|
์ฒ์ 10GB | $0.00 |
10GB ์ด๊ณผ | $40.00 |
1 ์์ธํ ๊ฐ๊ฒฉ ์ ๋ณด๋ ๊ฐ๊ฒฉ ์ฑ ์ ๊ฐ์ด๋๋ฅผ ์ฐธ์กฐํ์ธ์.
2 TB๋ ํ ๋น๋ฐ์ดํธ ๋๋ 240๋ฐ์ดํธ๋ฅผ ๋ํ๋ ๋๋ค.
USD ์ธ์ ํตํ๋ก ์ง๋ถํ๋ ๊ฒฝ์ฐ Cloud Platform SKU์ ํด๋น ํตํ ๊ฐ๊ฒฉ์ด ์ ์ฉ๋ฉ๋๋ค.
$300์ ๋ฌด๋ฃ ํฌ๋ ๋ง๊ณผ 20์ฌ ๊ฐ์ ํญ์ ๋ฌด๋ฃ ์ ํ์ผ๋ก Google Cloud์์ ๋น๋ํ์ธ์.