Datastream์ SQL Server ์์ค๊ฐ ํ๋ฆฌ๋ทฐ ๋ฒ์ ์ผ๋ก ์ ๊ณต๋ฉ๋๋ค. ๋ธ๋ก๊ทธ ๊ฒ์๋ฌผ ์ฝ๊ธฐ
์ฌ์ฉํ๊ธฐ ์ฌ์ด ์๋ฒ๋ฆฌ์ค ๋ณ๊ฒฝ ๋ฐ์ดํฐ ์บก์ฒ ๋ฐ ๋ณต์ ์๋น์ค
MySQL, PostgreSQL, AlloyDB, SQL Server, Oracle ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์คํธ๋ฆฌ๋ฐ ๋ฐ์ดํฐ์ ์ก์ธ์ค
BigQuery์ฉ Datastream์ผ๋ก BigQuery์์ ์ค์๊ฐ์ ๊ฐ๊น์ด ๋ถ์
๋ณด์ ์ฐ๊ฒฐ์ด ๋ด์ฅ๋ ๊ฐํธํ ์ค์ ์ ํตํด ๊ฐ์น๋ฅผ ๋น ๋ฅด๊ฒ ์คํ
๋ฆฌ์์ค๋ฅผ ํ๋ก๋น์ ๋ ๋๋ ๊ด๋ฆฌํ ํ์ ์์ด ์๋์ผ๋ก ํ์ฅ๋๋ ์๋ฒ๋ฆฌ์ค ํ๋ซํผ
์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ๋ถํ ๋ฐ ์ ์ฌ์ ์ค๋จ์ ์ค์ด๋ ๋ก๊ทธ ๊ธฐ๋ฐ ๋ฉ์ปค๋์ฆ
์ด์
์ด๊ธฐ์ข ๋ฐ์ดํฐ๋ฒ ์ด์ค, ์คํ ๋ฆฌ์ง ์์คํ , ์ ํ๋ฆฌ์ผ์ด์ ์ ๋ฐ์์ ์งง์ ์ง์ฐ ์๊ฐ์ผ๋ก ์์ ์ ์ผ๋ก ๋ฐ์ดํฐ๋ฅผ ๋๊ธฐํํ๋ฉฐ, ์์ค ์ฑ๋ฅ์ ๋ฏธ์น๋ ์ํฅ์ ์ต์ํํฉ๋๋ค.
๊ด๋ฆฌํ ์ธํ๋ผ๊ฐ ์์ผ๋ฉฐ, ์ํํ๊ฒ ํ์ฅ ๋๋ ์ถ์ํ ์ ์๋ ๊ฐํธํ ์๋ฒ๋ฆฌ์ค ๋ฐฉ์์ ์๋น์ค๋ก ๋น ๋ฅด๊ฒ ์ค๋นํ๊ณ ์คํํ์ธ์.
์ต๊ณ ์ Google Cloud ์๋น์ค(์: BigQuery, Spanner, Dataflow, Data Fusion)๋ก ์กฐ์ง ์ ์ฒด์์ ๋ฐ์ดํฐ๋ฅผ ์ฐ๊ฒฐํ๊ณ ํตํฉํ์ธ์.
์ฃผ์ ํน์ง
DataStream์ MySQL, PostgreSQL, AlloyDB, SQL Server, Oracle ๋ฐ์ดํฐ๋ฒ ์ด์ค์์ ๋ชจ๋ ๋ณ๊ฒฝ ์ฌํญ(์ฝ์ , ์ ๋ฐ์ดํธ, ์ญ์ )์ ์ฝ๊ณ ์ ์กํ์ฌ BigQuery, Cloud SQL, Cloud Storage, Spanner๋ก ๋ฐ์ดํฐ๋ฅผ ๋ก๋ํฉ๋๋ค. ์์ด์ ํธ๊ฐ ์๋ Google ๊ธฐ๋ฐ์ด๊ธฐ ๋๋ฌธ์ ๋ฐ์ํ๋ ๋ชจ๋ ์ด๋ฒคํธ๋ฅผ ์์ ์ ์ผ๋ก ์คํธ๋ฆฌ๋ฐํ ์ ์์ต๋๋ค. Datastream์ ๋งค์ 5,000์ต ๊ฐ๊ฐ ๋๋ ์ด๋ฒคํธ๋ฅผ ์ฒ๋ฆฌํฉ๋๋ค.
์๊ธฐ์น ์์ ์ค๋จ์ ํฐ ๋น์ฉ์ ์ด๋ํ ์ ์์ต๋๋ค. Datastream์ ๊ฐ๋ ฅํ ์คํธ๋ฆผ ๋ณต๊ตฌ ๊ธฐ๋ฅ์ด ๋ค์ดํ์๊ณผ ๋ฐ์ดํฐ ์์ค์ ์ต์ํํ๋ฏ๋ก ์ค์ํ ๋น์ฆ๋์ค ์ด์์ ์ ์ง๊ด๋ฆฌํ๊ณ ์ค๋จ ์๋ ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ์ ๊ธฐ๋ฐ์ผ๋ก ์ ๋ณด์ ๊ธฐ๋ฐํ ๊ฒฐ์ ์ ๋ด๋ฆด ์ ์์ต๋๋ค.
์์ค ์คํค๋ง๊ฐ ๋ณ๊ฒฝ๋๋ฉด Datastream์์ ๋น ๋ฅด๊ณ ์ํํ ์คํค๋ง ๋๋ฆฌํํธ ํด๊ฒฐ์ ์ง์ํฉ๋๋ค. Datastream์ด ํ์ผ์ ์ํํ์ฌ ์คํค๋ง๊ฐ ๋ณ๊ฒฝ๋ ๋๋ง๋ค ๋์ ๋ฒํท์ ์ ํ์ผ์ ๋ง๋ญ๋๋ค. ์๋ณธ ์์ค ๋ฐ์ดํฐ ์ ํ์ ์ต์ ๋ฒ์ ์ ์คํค๋ง ๋ ์ง์คํธ๋ฆฌ๋ฅผ ์ฌ์ฉํด API ํธ์ถ๋ง ํ๋ฉด ๋ฉ๋๋ค.
Datastream์ ์ ์ก ์ค ๋ฐ์ดํฐ๋ฅผ ๋ณดํธํ๊ธฐ ์ํด ์ฌ๋ฌ ๊ฐ์ง ์์ ํ ๋น๊ณต๊ฐ ์ฐ๊ฒฐ ๋ฐฉ์์ ์ง์ํฉ๋๋ค. ๋ํ ๋ฐ์ดํฐ๋ ์ ์ก ๋ฐ ์ ์ฅ ์ค ์ํธํ๋๋ฏ๋ก ๋ฐ์ดํฐ๊ฐ ์คํธ๋ฆฌ๋ฐ๋๋ ๋์ ๋ณดํธ๋์ด ์์ฌํ ์ ์์ต๋๋ค.
๊ณ ๊ฐ
Datastream์ ๋ค์ํ ์ด์ ๋ฐ์ดํฐ ์์ค์์ BigQuery๋ก ๊ณ ํ์ง์ ์กฐ์ ๋ ๋ฐ์ดํฐ ๋ณต์ ๋ฅผ ๋ฌ์ฑํ๋ ๋ฐ ์ค์ํ ์ญํ ์ ํ์ต๋๋ค. ์ฌ์ฉํ๊ธฐ ์ฝ๊ณ ์๋ฒ๋ฆฌ์ค์ด๋ฉฐ ํ์ฅ์ฑ์ด ๋ฐ์ด๋๋ฏ๋ก ๋จ๊ธฐ๊ฐ์ ์ฒซ ๋ฒ์งธ ์คํธ๋ฆผ์ ์ค์ ํ ์ ์์ต๋๋ค. ๋ฐ์ดํฐ ์์ง์ด ๋ฐ์ดํฐ ํ๋ซํผ ๋ง์ด๊ทธ๋ ์ด์ ์ ๊ธฐ๋ฐ์ด์๊ธฐ ๋๋ฌธ์ ์๋๊ฐ ๋งค์ฐ ์ค์ํ์ต๋๋ค.
์ฌ๋ ์ฐ๋๋ฅด ์นผ๋ ๋, Just Eat Takeaway ๋ฐ์ดํฐ ์์ง ์ฑ ์์
์๋ก์ด ์์
Google Cloud ๋ด์ค๋ ํฐ๋ฅผ ์ ์ฒญํ์ฌ ์ ํ ์ ๋ฐ์ดํธ, ํ์ฌ ์ ๋ณด, ํน๋ณ ์ด๋ฒคํธ ๋ฑ์ ์์์ ๋ฐ์๋ณด์ธ์.
๋ฌธ์
์ฌ์ฉ ์ฌ๋ก
๋ณ๊ฒฝ ๋ฐ์ดํฐ ์บก์ฒ๋ ์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์์ ๋ณ๊ฒฝ ์ด๋ฒคํธ(์ฝ์ , ์ ๋ฐ์ดํธ, ์ญ์ )๋ฅผ ์ฝ๊ณ ๋ฐ์ดํฐ ๋์์ ์ฐ๋ ๋ฐฉ์์ผ๋ก ๋ฐ์ดํฐ๋ฅผ ํตํฉํ์ฌ ์์ ์ด ์ด๋ฃจ์ด์ง๋๋ก ํฉ๋๋ค. Datastream์ Oracle ๋ฐ MySQL ๋ฐ์ดํฐ๋ฒ ์ด์ค์์ BigQuery, Cloud SQL, Cloud Storage, Spanner๋ก์ ๋ณ๊ฒฝ ์คํธ๋ฆผ์ ์ง์ํ์ฌ ์ค์๊ฐ ๋ถ์, ๋ฐ์ดํฐ๋ฒ ์ด์ค ๋ณต์ , ๊ธฐํ ์ฌ์ฉ ์ฌ๋ก๋ฅผ ์ง์ํฉ๋๋ค. ์์ผ๋ก ๋ค๋ฅธ ์์ค์ ๋์๋ ์ถ๊ฐ๋ ์์ ์ ๋๋ค.
๊ฐ๊ฒฉ ์ฑ ์
Datastream ๊ฐ๊ฒฉ์ ์ค์ ๋ก ์ฒ๋ฆฌ๋ ์๋ณ ๋ฐ์ดํฐ์ ๋ฐ๋ผ ๊ณ์ฐ๋ฉ๋๋ค. ๊ฐ๊ฒฉ ์ฑ ์ ์ ๊ดํ ์ถ๊ฐ ์ธ๋ถ์ ๋ณด๋ Datastream ๊ฐ๊ฒฉ ์ฑ ์ ํ์ด์ง์์ ํ์ธํ ์ ์์ต๋๋ค.
Cloud Storage, Dataflow, BigQuery์ ๊ฐ์ ์ถ๊ฐ ๋ฆฌ์์ค๋ ํด๋น ์๋น์ค์ ๊ฐ๊ฒฉ ์ฑ ์ ์ ๋ฐ๋ผ ์ฒญ๊ตฌ๋ฉ๋๋ค.
ORACLEยฎ์ Oracle Corporation์ ๋ฑ๋ก ์ํ์ ๋๋ค.
$300์ ๋ฌด๋ฃ ํฌ๋ ๋ง๊ณผ 20์ฌ ๊ฐ์ ํญ์ ๋ฌด๋ฃ ์ ํ์ผ๋ก Google Cloud์์ ๋น๋ํ์ธ์.