๋ค์ ๋จ๊ณ์์๋ Datastream๊ณผ ํจ๊ป ์ฌ์ฉํ ์์ฒด ๊ด๋ฆฌํ SQL Server ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ฅผ ๊ตฌ์ฑํ๋ ๋ฐฉ๋ฒ์ ์ค๋ช ํฉ๋๋ค.
์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ CDC๋ฅผ ์ฌ์ฉ ์ค์ ํฉ๋๋ค. ์ด๋ ๊ฒ ํ๋ ค๋ฉด ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ฐ๊ฒฐํ๊ณ SQL ํ๋กฌํํธ ๋๋ ํฐ๋ฏธ๋์์ ๋ค์ ๋ช ๋ น์ด๋ฅผ ์คํํฉ๋๋ค.
USE [DATABASE_NAME] GO EXEC sys.sp_cdc_enable_db GO
DATABASE_NAME
์ ์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ด๋ฆ์ผ๋ก ๋ฐ๊ฟ๋๋ค.๋ณ๊ฒฝ์ฌํญ์ ์บก์ฒํด์ผ ํ๋ ํ ์ด๋ธ์์ CDC๋ฅผ ์ฌ์ฉ ์ค์ ํฉ๋๋ค.
USE [DATABASE_NAME] EXEC sys.sp_cdc_enable_table @source_schema = N'SCHEMA_NAME', @source_name = N'TABLE_NAME', @role_name = NULL GO
๋ค์์ ๋ฐ๊ฟ๋๋ค.
DATABASE_NAME
: ์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ด๋ฆSCHEMA_NAME
: ํ ์ด๋ธ์ด ์ํ ์คํค๋ง์ ์ด๋ฆTABLE_NAME
: CDC๋ฅผ ์ฌ์ฉ ์ค์ ํ ํ ์ด๋ธ์ ์ด๋ฆ
SQL Server ์์ด์ ํธ๋ฅผ ์์ํ๊ณ ํญ์ ์คํ๋๋์ง ํ์ธํฉ๋๋ค. SQL Server ์์ด์ ํธ๊ฐ ์ฅ์๊ฐ ์๋ ์ค์ง ์ํ๋ก ์ ์ง๋๋ฉด ๋ก๊ทธ๊ฐ ์๋ฆด ์ ์์ผ๋ฉฐ Datastream์์ ์ฝ์ง ์์ ๋ณ๊ฒฝ ๋ฐ์ดํฐ๊ฐ ์๊ตฌ์ ์ผ๋ก ์์ค๋ ์ ์์ต๋๋ค.
SQL Server ์์ด์ ํธ ์คํ์ ๋ํ ์์ธํ ๋ด์ฉ์ SQL Server ์์ด์ ํธ ์ธ์คํด์ค ์์, ์ค์ง, ๋ค์ ์์์ ์ฐธ์กฐํ์ธ์.
์ค๋ ์ท ๊ฒฉ๋ฆฌ๋ฅผ ์ฌ์ฉ ์ค์ ํฉ๋๋ค.
SQL Server ๋ฐ์ดํฐ๋ฒ ์ด์ค์์ ๋ฐ์ดํฐ๋ฅผ ๋ฐฑํํ ๋๋ ์ค๋ ์ท ์ผ๊ด์ฑ์ ํ์ธํ๋ ๊ฒ์ด ์ค์ํฉ๋๋ค. ์ด ์น์ ์์ ์ค๋ช ํ๋ ์ค์ ์ ์ ์ฉํ์ง ์์ ๊ฒฝ์ฐ ๋ฐฑํ ํ๋ก์ธ์ค ์ค์ ๋ฐ์ดํฐ๋ฒ ์ด์ค๊ฐ ๋ณ๊ฒฝ๋์ด ํน๋ณํ ๊ธฐ๋ณธ ํค๊ฐ ์๋ ํ ์ด๋ธ์ ๋ํด ์ค๋ณต ๋๋ ์๋ชป๋ ๊ฒฐ๊ณผ๊ฐ ๋ฐ์ํ ์ ์์ต๋๋ค.
์ค๋ ์ท ๊ฒฉ๋ฆฌ๋ฅผ ์ฌ์ฉ ์ค์ ํ๋ฉด ๋ฐฑํ ํ๋ก์ธ์ค ์์ ์ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์์ ๋ณด๊ธฐ๊ฐ ์์ฑ๋ฉ๋๋ค. ์ด๋ ๊ฒ ํ๋ฉด ๋ค๋ฅธ ์ฌ์ฉ์๊ฐ ๋ผ์ด๋ธ ํ ์ด๋ธ์ ๋์์ ๋ณ๊ฒฝํ๋๋ผ๋ ๋ณต์ฌ๋๋ ๋ฐ์ดํฐ๊ฐ ์ผ๊ด๋๊ฒ ์ ์ง๋ฉ๋๋ค. ์ค๋ ์ท ๊ฒฉ๋ฆฌ๋ฅผ ์ฌ์ฉ ์ค์ ํ๋ฉด ์ฑ๋ฅ์ ์ฝ๊ฐ ์ํฅ์ ๋ฏธ์น ์ ์์ผ๋ ์์ ์ ์ธ ๋ฐ์ดํฐ ์ถ์ถ์ ์ํด ํ์์ ๋๋ค.
์ค๋ ์ท ๊ฒฉ๋ฆฌ๋ฅผ ์ฌ์ฉ ์ค์ ํ๋ ค๋ฉด ๋ค์ ์๋ด๋ฅผ ๋ฐ๋ฅด์ธ์.
- SQL Server ํด๋ผ์ด์ธํธ๋ฅผ ์ฌ์ฉํ์ฌ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ฐ๊ฒฐํฉ๋๋ค.
- ๋ค์ ๋ช ๋ น์ด๋ฅผ ์คํํฉ๋๋ค.
ALTER DATABASE DATABASE_NAME SET ALLOW_SNAPSHOT_ISOLATION ON;
DATABASE_NAME์ ๋ฐ์ดํฐ๋ฒ ์ด์ค ์ด๋ฆ์ผ๋ก ๋ฐ๊ฟ๋๋ค.
Datastream ์ฌ์ฉ์๋ฅผ ๋ง๋ญ๋๋ค.
์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ฐ๊ฒฐํ๊ณ ๋ค์ ๋ช ๋ น์ด๋ฅผ ์ ๋ ฅํฉ๋๋ค.
USE DATABASE_NAME;
Datastream์์ ์ฐ๊ฒฐ ํ๋กํ์ ์ค์ ํ ๋ ์ฌ์ฉํ ๋ก๊ทธ์ธ์ ๋ง๋ญ๋๋ค.
CREATE LOGIN YOUR_LOGIN WITH PASSWORD = 'PASSWORD';
์ฌ์ฉ์๋ฅผ ๋ง๋ญ๋๋ค.
CREATE USER USER_NAME FOR LOGIN YOUR_LOGIN;
์ฌ์ฉ์์๊ฒ
db_datareader
์ญํ ์ ํ ๋นํฉ๋๋ค.EXEC sp_addrolemember 'db_datareader', 'USER_NAME';
์ฌ์ฉ์์๊ฒ
VIEW DATABASE STATE
๊ถํ์ ๋ถ์ฌํฉ๋๋ค.GRANT VIEW DATABASE STATE TO USER_NAME;
์ด ์ฌ์ฉ์๋ฅผ
master
๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ถ๊ฐํฉ๋๋ค.USE master; CREATE USER USER_NAME FOR LOGIN YOUR_LOGIN;
ํธ๋์ญ์ ๋ก๊ทธ CDC ๋ฉ์๋์ ํ์ํ ์ถ๊ฐ ๋จ๊ณ
์ด ์น์ ์์ ์ค๋ช ํ๋ ๋จ๊ณ๋ ํธ๋์ญ์ ๋ก๊ทธ CDC ๋ฉ์๋์ ์ฌ์ฉํ๋๋ก ์์ค SQL Server ๋ฐ์ดํฐ๋ฒ ์ด์ค๋ฅผ ๊ตฌ์ฑํ๋ ๊ฒฝ์ฐ์๋ง ํ์ํฉ๋๋ค.
์์ค ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ฐ๊ฒฐํ๊ณ ์ฌ์ฉ์์๊ฒ
db_owner
๋ฐdb_denydatawriter
์ญํ ์ ํ ๋นํฉ๋๋ค.USE DATABASE_NAME; EXEC sp_addrolemember 'db_owner', 'USER_NAME'; EXEC sp_addrolemember 'db_denydatawriter', 'USER_NAME';
sys.fn_dblog
ํจ์์SELECT
๊ถํ์ ๋ถ์ฌํฉ๋๋ค.USE master; GRANT SELECT ON sys.fn_dblog TO USER_NAME;
์ฌ์ฉ์๋ฅผ msdb ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ถ๊ฐํ๊ณ ๋ค์ ๊ถํ์ ์ฌ์ฉ์์๊ฒ ํ ๋นํฉ๋๋ค.
USE msdb; CREATE USER USER_NAME FOR LOGIN YOUR_LOGIN; GRANT SELECT ON dbo.sysjobs TO USER_NAME;
master
๋ฐ์ดํฐ๋ฒ ์ด์ค์์ ์ฌ์ฉ์์๊ฒ ๋ค์ ๊ถํ์ ํ ๋นํฉ๋๋ค.USE master; GRANT VIEW SERVER STATE TO YOUR_LOGIN;
์์ค์ ๋ณ๊ฒฝ์ฌํญ์ ์ ์ฉํ ๋ณด๊ด ๊ธฐ๊ฐ์ ์ค์ ํฉ๋๋ค.
USE [DATABASE_NAME] EXEC sys.sp_cdc_change_job @job_type = 'capture' , @pollinginterval = 86399 EXEC sp_cdc_stop_job 'capture' EXEC sp_cdc_start_job 'capture'
@pollinginterval
๋งค๊ฐ๋ณ์๋ ์ด ๋จ์๋ก ์ธก์ ๋๋ฉฐ ๊ถ์ฅ ๊ฐ์86399
๋ก ์ค์ ๋ฉ๋๋ค. ์ฆ, ํธ๋์ญ์ ๋ก๊ทธ๋ 86,399์ด(1์ผ) ๋์ ๋ณ๊ฒฝ์ฌํญ์ ๋ณด๊ดํฉ๋๋ค.sp_cdc_start_job 'capture
ํ๋ก์์ ๋ฅผ ์คํํ๋ฉด ์ค์ ์ด ์์๋ฉ๋๋ค.๋ฐ์ดํฐ๋ฒ ์ด์ค์์ ์คํ ์ค์ธ ์ ๋ฆฌ ๋๋ ์บก์ฒ ์์ ์ด ์์ผ๋ฉด ์ค์งํฉ๋๋ค. ์์ธํ ๋ด์ฉ์ ๋ณ๊ฒฝ ๋ฐ์ดํฐ ์บก์ฒ ๊ด๋ฆฌ ๋ฐ ๋ชจ๋ํฐ๋ง์ ์ฐธ์กฐํ์ธ์.
๋ก๊ทธ ์๋ฆผ ๋ฐฉ์ง๋ฅผ ์ค์ ํฉ๋๋ค.
CDC ๋ฆฌ๋๊ฐ ๋ก๊ทธ๋ฅผ ์ฝ์ ์ ์๋ ์ถฉ๋ถํ ์๊ฐ์ ํ๋ณดํ๋ ๋์์ ๋ก๊ทธ ์๋ฅด๊ธฐ๋ฅผ ํ์ฉํ์ฌ ์ ์ฅ ๊ณต๊ฐ์ ์ฌ์ฉํ์ง ์๋๋ก ํ๋ ค๋ฉด ๋ก๊ทธ ์๋ฆผ ๋ฐฉ์ง๋ฅผ ์ค์ ํ ์ ์์ต๋๋ค.
- SQL Server ํด๋ผ์ด์ธํธ๋ฅผ ์ฌ์ฉํ์ฌ ๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์ฐ๊ฒฐํฉ๋๋ค.
๋ก๊ทธ ์๋ฆผ์ ๋ฐฉ์งํ๊ธฐ ์ํด ์ง์ ํ ๊ธฐ๊ฐ ๋์ ํ์ฑ ํธ๋์ญ์ ์ ์คํํ๋ ์ ์ฅ ํ๋ฌ์์ ๋ฅผ ๋ง๋ญ๋๋ค.
CREATE PROCEDURE dbo.DatastreamLogTruncationSafeguard @transaction_logs_retention_time INT AS BEGIN DECLARE @transactionLog TABLE (beginLSN BINARY(10), endLSN BINARY(10)) INSERT @transactionLog EXEC sp_repltrans DECLARE @currentDateTime DATETIME = GETDATE() DECLARE @cutoffDateTime DATETIME = DATEADD(MINUTE, -@transaction_logs_retention_time, @currentDateTime) DECLARE @firstValidLSN BINARY(10) = NULL DECLARE @lastValidLSN BINARY(10) = NULL DECLARE @firstTxnTime DATETIME = NULL DECLARE @lastTxnTime DATETIME = NULL SELECT TOP 1 @lastTxnTime = t.logStartTime, @lastValidLSN = t.beginLSN FROM ( SELECT beginLSN AS beginLSN, (SELECT TOP 1 [begin time] FROM fn_dblog(stuff(stuff(CONVERT(CHAR(24), beginLSN, 1), 19, 0, ':'), 11, 0, ':'), DEFAULT)) AS logStartTime FROM @transactionLog ) t ORDER BY t.beginLSN DESC -- If all transactions are before cutoff, clear everything IF (@lastTxnTime < @cutoffDateTime) BEGIN EXEC sp_repldone NULL, NULL, 0, 0, 1 END ELSE BEGIN -- Find the earliest transaction SELECT TOP 1 @firstTxnTime = t.logStartTime, @firstValidLSN = ISNULL(@firstValidLSN, t.beginLSN) FROM ( SELECT beginLSN AS beginLSN, (SELECT TOP 1 [begin time] FROM fn_dblog(stuff(stuff(CONVERT(CHAR(24), beginLSN, 1), 19, 0, ':'), 11, 0, ':'), DEFAULT)) AS logStartTime FROM @transactionLog ) t ORDER BY t.beginLSN ASC IF (@firstTxnTime < @cutoffDateTime) BEGIN -- Identify the earliest and latest LSNs within VLogs before cutoff SELECT @firstValidLSN = SUBSTRING(MAX(t.lsnMarkers), 1, 10), @lastValidLSN = SUBSTRING(MAX(t.lsnMarkers), 11, 10) FROM ( SELECT MIN(beginLSN + endLSN) AS lsnMarkers FROM @transactionLog GROUP BY SUBSTRING(beginLSN, 1, 4) ) t WHERE ( SELECT TOP 1 [begin time] FROM fn_dblog(stuff(stuff(CONVERT(CHAR(24), t.lsnMarkers, 1), 19, 0, ':'), 11, 0, ':'), DEFAULT) WHERE Operation = 'LOP_BEGIN_XACT' ) < @cutoffDateTime EXEC sp_repldone @firstValidLSN, @lastValidLSN, 0, 0, 0 END END END;
๋ค๋ฅธ ์ ์ฅ ํ๋ฌ์์ ๋ฅผ ๋ง๋ญ๋๋ค. ์ด๋ฒ์๋ ์ง์ ๋ ์ฃผ๊ธฐ์ ๋ฐ๋ผ ์ด์ ๋จ๊ณ์์ ๋ง๋ ์ ์ฅ ํ๋ฌ์์ ๋ฅผ ์คํํ๋ ์์ ์ ๋ง๋ญ๋๋ค.
CREATE PROCEDURE [dbo].[SetUpDatastreamJob] @transaction_logs_retention_time INT AS BEGIN DECLARE @database_name VARCHAR(MAX) SET @database_name = (SELECT DB_NAME());; DECLARE @command_str VARCHAR(MAX); SET @command_str = CONCAT('Use ', @database_name,'; exec dbo.DatastreamLogTruncationSafeguard @transaction_logs_retention_time = ' + CAST(@transaction_logs_retention_time AS VARCHAR(10))); DECLARE @job_name VARCHAR(MAX); SET @job_name = CONCAT(@database_name, '_', 'DatastreamLogTruncationSafeguardJob1') DECLARE @current_time INT = CAST(FORMAT(GETDATE(), 'HHmmss') AS INT); -- Schedule the procedure to run after every 5 minutes. IF NOT EXISTS ( SELECT * FROM msdb.dbo.sysjobs WHERE name = @job_name ) BEGIN EXEC msdb.dbo.sp_add_job @job_name = @job_name, @enabled = 1, @description = N'Execute the procedure every 5 minutes.' ; EXEC msdb.dbo.sp_add_jobstep @job_name = @job_name, @step_name = N'Execute_DatastreamLogTruncationSafeguard', @subsystem = N'TSQL', @command = @command_str; DECLARE @schedule_name_1 VARCHAR(MAX); SET @schedule_name_1 = CONCAT(@database_name, '_', 'DatastreamEveryFiveMinutesSchedule') EXEC msdb.dbo.sp_add_schedule @schedule_name = @schedule_name_1, @freq_type = 4, -- daily start @freq_subday_type = 4, -- every X minutes daily @freq_interval = 1, @freq_subday_interval = 5, @active_start_time = @current_time; EXEC msdb.dbo.sp_attach_schedule @job_name = @job_name, @schedule_name = @schedule_name_1 ; -- Add a schedule that runs the stored procedure on the SQL Server Agent startup. DECLARE @schedule_name_agent_startup VARCHAR(MAX); SET @schedule_name_agent_startup = CONCAT(@database_name, '_', 'DatastreamSqlServerAgentStartupSchedule') EXEC msdb.dbo.sp_add_schedule @schedule_name = @schedule_name_agent_startup, @freq_type = 64, -- start on SQL Server Agent startup @active_start_time = @current_time; EXEC msdb.dbo.sp_attach_schedule @job_name = @job_name, @schedule_name = @schedule_name_agent_startup ; EXEC msdb.dbo.sp_add_jobserver @job_name = @job_name, @server_name = @@servername ; END END;
Datastream ์์ ์ ๋ง๋๋ ์ ์ฅ ํ๋ฌ์์ ๋ฅผ ์คํํฉ๋๋ค.
DECLARE @transaction_logs_retention_time INT = (INT) EXEC [dbo].[SetUpDatastreamJob] @transaction_logs_retention_time
INT๋ฅผ ๋ก๊ทธ๋ฅผ ๋ณด๊ดํ๋ ค๋ ์๊ฐ(๋ถ)์ผ๋ก ๋ฐ๊ฟ๋๋ค. ์๋ฅผ ๋ค๋ฉด ๋ค์๊ณผ ๊ฐ์ต๋๋ค.
60
๊ฐ์ ๋ณด๊ด ๊ธฐ๊ฐ์ 1์๊ฐ์ผ๋ก ์ค์ ํฉ๋๋ค.24 * 60
๊ฐ์ ๋ณด๊ด ๊ธฐ๊ฐ์ 1์ผ๋ก ์ค์ ํฉ๋๋ค.3 * 24 * 60
๊ฐ์ ๋ณด๊ด ๊ธฐ๊ฐ์ 3์ผ๋ก ์ค์ ํฉ๋๋ค.
๋ค์ ๋จ๊ณ
- Datastream์ SQL Server ์์ค ์๋ ๋ฐฉ๋ฒ ์์ธํ ์์๋ณด๊ธฐ