पंक्तियों के बीच, जहां 90 दिन बीत गए, वहां पुनरावृत्ति कैसे पाएं


17

यह मेरे सी # होमवर्ल्ड में एक प्रकार का तुच्छ कार्य है, लेकिन मैं इसे अभी तक एसक्यूएल में नहीं बनाता हूं और इसे सेट-बेस्ड (कर्सर के बिना) हल करना पसंद करूंगा। एक परिणाम इस तरह एक क्वेरी से आना चाहिए।

SELECT SomeId, MyDate, 
    dbo.udfLastHitRecursive(param1, param2, MyDate) as 'Qualifying'
FROM T

यह कैसे काम करना चाहिए

मैं उन तीनों पैरामेट्स को यूडीएफ में भेजता हूं।
यूडीएफ आंतरिक रूप से एक दृश्य से संबंधित <= 90 दिन पुरानी पंक्तियों को लाने के लिए पैरामेट्स का उपयोग करता है।
UDF ने 'MyDate' को पीछे छोड़ दिया है और यदि यह कुल गणना में शामिल किया जाना चाहिए तो 1 लौटाता है।
यदि ऐसा नहीं होना चाहिए, तो यह 0. योग्य नाम के रूप में यहाँ लौटा।

Udf क्या करेगा

दिनांक क्रम में पंक्तियों को सूचीबद्ध करें। पंक्तियों के बीच के दिनों की गणना करें। हिट करने के लिए परिणाम डिफॉल्ट में पहली पंक्ति = 1. यदि अंतर 90 तक है, - तो अगली पंक्ति तक पास करें जब तक अंतराल का योग 90 दिन (90 वें दिन पास होना चाहिए) तक पहुंचने पर, हिट को 1 पर सेट करें और अंतराल को 0 पर रीसेट करें यह भी परिणाम से पंक्ति को छोड़ने के बजाय काम करेगा।

                                          |(column by udf, which not work yet)
Date              Calc_date     MaxDiff   | Qualifying
2014-01-01 11:00  2014-01-01    0         | 1
2014-01-03 10:00  2014-01-01    2         | 0
2014-01-04 09:30  2014-01-03    1         | 0
2014-04-01 10:00  2014-01-04    87        | 0
2014-05-01 11:00  2014-04-01    30        | 1

ऊपर दी गई तालिका में, MaxDiff कॉलम पिछली पंक्ति में दिनांक से अंतराल है। मेरे अब तक के प्रयासों के साथ समस्या यह है कि मैं ऊपर के नमूने में दूसरी अंतिम पंक्ति को अनदेखा नहीं कर सकता।

[संपादित करें]
टिप्पणी के अनुसार मैं एक टैग जोड़ता हूं और udf पेस्ट करता हूं जिसे मैंने अभी संकलित किया है। हालांकि, सिर्फ एक प्लेसहोल्डर है और उपयोगी परिणाम नहीं देगा।

;WITH cte (someid, otherkey, mydate, cost) AS
(
    SELECT someid, otherkey, mydate, cost
    FROM dbo.vGetVisits
    WHERE someid = @someid AND VisitCode = 3 AND otherkey = @otherkey 
    AND CONVERT(Date,mydate) = @VisitDate

    UNION ALL

    SELECT top 1 e.someid, e.otherkey, e.mydate, e.cost
    FROM dbo.vGetVisits AS E
    WHERE CONVERT(date, e.mydate) 
        BETWEEN DateAdd(dd,-90,CONVERT(Date,@VisitDate)) AND CONVERT(Date,@VisitDate)
        AND e.someid = @someid AND e.VisitCode = 3 AND e.otherkey = @otherkey 
        AND CONVERT(Date,e.mydate) = @VisitDate
        order by e.mydate
)

मेरे पास एक और क्वेरी है जिसे मैं अलग से परिभाषित करता हूं जो कि मेरी आवश्यकता के अधिक करीब है, लेकिन इस तथ्य से अवरुद्ध हूं कि मैं खिड़की वाले स्तंभों की गणना नहीं कर सकता। मैंने एक ऐसी कोशिश भी की, जो MyDate के ऊपर एक LAG () के साथ कम या ज्यादा एक ही आउटपुट देती है, जो एक डेटेड के साथ घिरा हुआ है।

SELECT
    t.Mydate, t.VisitCode, t.Cost, t.SomeId, t.otherkey, t.MaxDiff, t.DateDiff
FROM 
(
    SELECT *,
        MaxDiff = LAST_VALUE(Diff.Diff)  OVER (
            ORDER BY Diff.Mydate ASC
                ROWS BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW)
    FROM 
    (
        SELECT *,
            Diff =  ISNULL(DATEDIFF(DAY, LAST_VALUE(r.Mydate) OVER (
                        ORDER BY r.Mydate ASC
                            ROWS BETWEEN 1 PRECEDING AND 1 PRECEDING), 
                                r.Mydate),0),
            DateDiff =  ISNULL(LAST_VALUE(r.Mydate) OVER (
                        ORDER BY r.Mydate ASC
                            ROWS BETWEEN 1 PRECEDING AND 1 PRECEDING), 
                                r.Mydate)
        FROM dbo.vGetVisits AS r
        WHERE r.VisitCode = 3 AND r.SomeId = @SomeID AND r.otherkey = @otherkey
    ) AS Diff
) AS t
WHERE t.VisitCode = 3 AND t.SomeId = @SomeId AND t.otherkey = @otherkey
    AND t.Diff <= 90
ORDER BY
    t.Mydate ASC;

टिप्पणियाँ विस्तारित चर्चा के लिए नहीं हैं; इस वार्तालाप को बातचीत में स्थानांतरित कर दिया गया है ।
पॉल व्हाइट को फिर से बहाल मोनिका

जवाबों:


22

जैसा कि मैंने प्रश्न पढ़ा है, आवश्यक पुनरावर्ती एल्गोरिथ्म है:

  1. सेट में जल्द से जल्द तारीख के साथ पंक्ति लौटें
  2. उस तिथि को "वर्तमान" के रूप में सेट करें
  3. वर्तमान तिथि के 90 दिनों के बाद की तिथि के साथ पंक्ति ज्ञात करें
  4. चरण 2 से दोहराएं जब तक कि अधिक पंक्तियाँ न मिलें

यह एक पुनरावर्ती आम तालिका अभिव्यक्ति के साथ लागू करना अपेक्षाकृत आसान है।

उदाहरण के लिए, निम्नलिखित नमूना डेटा का उपयोग करना (प्रश्न के आधार पर):

DECLARE @T AS table (TheDate datetime PRIMARY KEY);

INSERT @T (TheDate)
VALUES
    ('2014-01-01 11:00'),
    ('2014-01-03 10:00'),
    ('2014-01-04 09:30'),
    ('2014-04-01 10:00'),
    ('2014-05-01 11:00'),
    ('2014-07-01 09:00'),
    ('2014-07-31 08:00');

पुनरावर्ती कोड है:

WITH CTE AS
(
    -- Anchor:
    -- Start with the earliest date in the table
    SELECT TOP (1)
        T.TheDate
    FROM @T AS T
    ORDER BY
        T.TheDate

    UNION ALL

    -- Recursive part   
    SELECT
        SQ1.TheDate
    FROM 
    (
        -- Recursively find the earliest date that is 
        -- more than 90 days after the "current" date
        -- and set the new date as "current".
        -- ROW_NUMBER + rn = 1 is a trick to get
        -- TOP in the recursive part of the CTE
        SELECT
            T.TheDate,
            rn = ROW_NUMBER() OVER (
                ORDER BY T.TheDate)
        FROM CTE
        JOIN @T AS T
            ON T.TheDate > DATEADD(DAY, 90, CTE.TheDate)
    ) AS SQ1
    WHERE
        SQ1.rn = 1
)
SELECT 
    CTE.TheDate 
FROM CTE
OPTION (MAXRECURSION 0);

परिणाम हैं:

╔═════════════════════════╗
         TheDate         
╠═════════════════════════╣
 2014-01-01 11:00:00.000 
 2014-05-01 11:00:00.000 
 2014-07-31 08:00:00.000 
╚═════════════════════════╝

TheDateएक प्रमुख कुंजी के रूप में एक सूचकांक के साथ , निष्पादन योजना बहुत कुशल है:

निष्पादन योजना

आप इसे किसी फ़ंक्शन में लपेट सकते हैं और इसे सीधे प्रश्न में उल्लिखित दृश्य के खिलाफ निष्पादित कर सकते हैं, लेकिन मेरी प्रवृत्ति इसके खिलाफ है। आमतौर पर, प्रदर्शन बेहतर होता है जब आप एक अस्थायी तालिका में दृश्य से पंक्तियों का चयन करते हैं, अस्थायी तालिका पर उपयुक्त सूचकांक प्रदान करते हैं, तो ऊपर दिए गए तर्क को लागू करें। विवरण दृश्य के विवरण पर निर्भर करता है, लेकिन यह मेरा सामान्य अनुभव है।

पूर्णता के लिए (और ypercube के उत्तर द्वारा संकेत दिया गया है) मुझे इस बात का उल्लेख करना चाहिए कि इस प्रकार की समस्या के लिए मेरा दूसरा समाधान है (जब तक कि टी-एसक्यूएल को उचित आदेश दिए गए कार्य नहीं मिलते हैं) एक SQLCLR कर्सर है ( तकनीक के उदाहरण के लिए मेरा उत्तर यहां देखें ) )। यह T-SQL कर्सर की तुलना में बहुत बेहतर प्रदर्शन करता है, और .NET भाषाओं में कौशल और अपने उत्पादन वातावरण में SQLCLR को चलाने की क्षमता रखने वालों के लिए सुविधाजनक है। यह पुनरावर्ती समाधान पर इस परिदृश्य में बहुत कुछ पेश नहीं कर सकता है क्योंकि अधिकांश लागत छँटाई है, लेकिन यह ध्यान देने योग्य है।


9

चूंकि यह है एक SQL सर्वर 2014 सवाल मैं भी एक "कर्सर" का एक देशी रूप संकलित संग्रहीत प्रक्रिया संस्करण जोड़ सकते हैं।

कुछ डेटा के साथ स्रोत तालिका:

create table T 
(
  TheDate datetime primary key
);

go

insert into T(TheDate) values
('2014-01-01 11:00'),
('2014-01-03 10:00'),
('2014-01-04 09:30'),
('2014-04-01 10:00'),
('2014-05-01 11:00'),
('2014-07-01 09:00'),
('2014-07-31 08:00');

एक तालिका प्रकार जो संग्रहीत कार्यविधि का पैरामीटर है। उचित रूप से समायोजित करेंbucket_count

create type TType as table
(
  ID int not null primary key nonclustered hash with (bucket_count = 16),
  TheDate datetime not null
) with (memory_optimized = on);

और एक संग्रहीत प्रक्रिया जो टेबल वैल्यू पैरामीटर से गुजरती है और पंक्तियों को इकट्ठा करती है @R

create procedure dbo.GetDates
  @T dbo.TType readonly
with native_compilation, schemabinding, execute as owner 
as
begin atomic with (transaction isolation level = snapshot, language = N'us_english', delayed_durability = on)

  declare @R dbo.TType;
  declare @ID int = 0;
  declare @RowsLeft bit = 1;  
  declare @CurDate datetime = '1901-01-01';
  declare @LastDate datetime = '1901-01-01';

  while @RowsLeft = 1
  begin
    set @ID += 1;

    select @CurDate = T.TheDate
    from @T as T
    where T.ID = @ID

    if @@rowcount = 1
    begin
      if datediff(day, @LastDate, @CurDate) > 90
      begin
        insert into @R(ID, TheDate) values(@ID, @CurDate);
        set @LastDate = @CurDate;
      end;
    end
    else
    begin
      set @RowsLeft = 0;
    end

  end;

  select R.TheDate
  from @R as R;
end

एक मेमोरी अनुकूलित टेबल चर को भरने के लिए कोड जो मूल रूप से संकलित संग्रह प्रक्रिया के पैरामीटर के रूप में उपयोग किया जाता है और प्रक्रिया को कॉल करता है।

declare @T dbo.TType;

insert into @T(ID, TheDate)
select row_number() over(order by T.TheDate),
       T.TheDate
from T;

exec dbo.GetDates @T;

परिणाम:

TheDate
-----------------------
2014-07-31 08:00:00.000
2014-01-01 11:00:00.000
2014-05-01 11:00:00.000

अपडेट करें:

यदि आपको किसी कारण से तालिका में प्रत्येक पंक्ति पर जाने की आवश्यकता नहीं है, तो आप पॉल व्हाइट द्वारा पुनरावर्ती सीटीई में लागू किए गए "जंप टू नेक्स्ट डेट" संस्करण के बराबर कर सकते हैं।

डेटा प्रकार को आईडी कॉलम की आवश्यकता नहीं है और आपको हैश इंडेक्स का उपयोग नहीं करना चाहिए।

create type TType as table
(
  TheDate datetime not null primary key nonclustered
) with (memory_optimized = on);

और संग्रहीत कार्यविधि select top(1) ..अगले मान को खोजने के लिए a का उपयोग करती है ।

create procedure dbo.GetDates
  @T dbo.TType readonly
with native_compilation, schemabinding, execute as owner 
as
begin atomic with (transaction isolation level = snapshot, language = N'us_english', delayed_durability = on)

  declare @R dbo.TType;
  declare @RowsLeft bit = 1;  
  declare @CurDate datetime = '1901-01-01';

  while @RowsLeft = 1
  begin

    select top(1) @CurDate = T.TheDate
    from @T as T
    where T.TheDate > dateadd(day, 90, @CurDate)
    order by T.TheDate;

    if @@rowcount = 1
    begin
      insert into @R(TheDate) values(@CurDate);
    end
    else
    begin
      set @RowsLeft = 0;
    end

  end;

  select R.TheDate
  from @R as R;
end

DATEADD और DatedIFF का उपयोग करके आपके समाधान प्रारंभिक डेटासेट के आधार पर अलग-अलग परिणाम दे सकते हैं।
पावेल नेफियोडोव

@PavelNefyodov मुझे वह दिखाई नहीं देता। क्या आप समझा सकते हैं या एक उदाहरण दे सकते हैं?
मिकेल एरिकसन

क्या आप इसे इस तरह की तारीखों पर जाँच सकते हैं ('2014-01-01 00: 00: 00.000'), ('2014-04-01 01: 00: 00.000'), कृपया? अधिक जानकारी मेरे उत्तर में मिल सकती है।
पावेल नेफ्योदोव

@PavelNefyodov आह, मैं देखता हूं। तो अगर मैं दूसरे को बदलूं तो T.TheDate >= dateadd(day, 91, @CurDate)सब ठीक होगा?
मिकेल एरिकसन

या ओ पी करने के लिए उपयुक्त हैं, की डेटाप्रकार बदलने TheDateमें TTypeकरने के लिए Date
मिकेल एरिकसन

5

एक समाधान जो एक कर्सर का उपयोग करता है।
(पहले, कुछ आवश्यक तालिकाओं और चर) :

-- a table to hold the results
DECLARE @cd TABLE
(   TheDate datetime PRIMARY KEY,
    Qualify INT NOT NULL
);

-- some variables
DECLARE
    @TheDate DATETIME,
    @diff INT,
    @Qualify     INT = 0,
    @PreviousCheckDate DATETIME = '1900-01-01 00:00:00' ;

वास्तविक कर्सर:

-- declare the cursor
DECLARE c CURSOR
    LOCAL STATIC FORWARD_ONLY READ_ONLY
    FOR
    SELECT TheDate
      FROM T
      ORDER BY TheDate ;

-- using the cursor to fill the @cd table
OPEN c ;

FETCH NEXT FROM c INTO @TheDate ;

WHILE @@FETCH_STATUS = 0
BEGIN
    SET @diff = DATEDIFF(day, @PreviousCheckDate, @Thedate) ;
    SET @Qualify = CASE WHEN @diff > 90 THEN 1 ELSE 0 END ;

    INSERT @cd (TheDate, Qualify)
        SELECT @TheDate, @Qualify ;

    SET @PreviousCheckDate = 
            CASE WHEN @diff > 90 
                THEN @TheDate 
                ELSE @PreviousCheckDate END ;

    FETCH NEXT FROM c INTO @TheDate ;
END

CLOSE c;
DEALLOCATE c;

और परिणाम प्राप्त करना:

-- get the results
SELECT TheDate, Qualify
    FROM @cd
    -- WHERE Qualify = 1        -- optional, to see only the qualifying rows
    ORDER BY TheDate ;

SQLFiddle पर परीक्षण किया गया


इस समाधान के लिए +1 लेकिन ऐसा नहीं है क्योंकि यह काम करने का सबसे कारगर तरीका है।
पावेल नेफियोडोव

@PavelNefyodov तब हमें प्रदर्शन का परीक्षण करना चाहिए!
ypercube y

मुझे उस पर पॉल व्हाइट पर भरोसा है। प्रदर्शन परीक्षण के साथ मेरा अनुभव उतना प्रभावशाली नहीं है। फिर यह मुझे आपके जवाब को वोट करने से नहीं रोकता है।
पावेल नेफियोडोव

धन्यवाद के ypercube। जैसा कि सीमित मात्रा में पंक्तियों पर तेजी से अपेक्षित है। 13000 पंक्तियों पर, CTE और इसने कमोबेश यही प्रदर्शन किया। 130.000 पंक्तियों पर 600% अंतर था। 13 मी पर यह मेरे परीक्षण उपकरण पर 15 मिनट गुजरता है। इसके अलावा मुझे प्राथमिक कुंजी को हटाना पड़ा, जो प्रदर्शन को थोड़ा प्रभावित कर सकता है।
स्वतंत्र

परीक्षण के लिए Thnx। आप INSERT @cdकेवल तब ही संशोधन करने के लिए परीक्षण कर सकते हैं @Qualify=1(और इस प्रकार यदि आप आउटपुट में उन सभी की आवश्यकता नहीं है, तो 13M पंक्तियों को सम्मिलित नहीं कर सकते हैं)। और समाधान पर एक सूचकांक खोजने पर निर्भर करता है TheDate। यदि कोई नहीं है, तो यह कुशल नहीं होगा।
ypercube y

2
IF  EXISTS (SELECT * FROM sys.objects WHERE object_id = OBJECT_ID(N'[dbo].[vGetVisits]') AND type in (N'U'))
DROP TABLE [dbo].[vGetVisits]
GO

CREATE TABLE [dbo].[vGetVisits](
    [id] [int] NOT NULL,
    [mydate] [datetime] NOT NULL,
 CONSTRAINT [PK_vGetVisits] PRIMARY KEY CLUSTERED 
(
    [id] ASC
)
)

GO

INSERT INTO [dbo].[vGetVisits]([id], [mydate])
VALUES
    (1, '2014-01-01 11:00'),
    (2, '2014-01-03 10:00'),
    (3, '2014-01-04 09:30'),
    (4, '2014-04-01 10:00'),
    (5, '2014-05-01 11:00'),
    (6, '2014-07-01 09:00'),
    (7, '2014-07-31 08:00');
GO


-- Clean up 
IF OBJECT_ID (N'dbo.udfLastHitRecursive', N'FN') IS NOT NULL
DROP FUNCTION udfLastHitRecursive;
GO

-- Actual Function  
CREATE FUNCTION dbo.udfLastHitRecursive
( @MyDate datetime)

RETURNS TINYINT

AS
    BEGIN 
        -- Your returned value 1 or 0
        DECLARE @Returned_Value TINYINT;
        SET @Returned_Value=0;
    -- Prepare gaps table to be used.
    WITH gaps AS
    (
                        -- Select Date and MaxDiff from the original table
                        SELECT 
                        CONVERT(Date,mydate) AS [date]
                        , DATEDIFF(day,ISNULL(LAG(mydate, 1) OVER (ORDER BY mydate), mydate) , mydate) AS [MaxDiff]
                        FROM dbo.vGetVisits
    )

        SELECT @Returned_Value=
            (SELECT DISTINCT -- DISTINCT in case we have same date but different time
                    CASE WHEN
                     (
                    -- It is a first entry
                    [date]=(SELECT MIN(CONVERT(Date,mydate)) FROM dbo.vGetVisits))
                    OR 
                    /* 
                    --Gap between last qualifying date and entered is greater than 90 
                        Calculate Running sum upto and including required date 
                        and find a remainder of division by 91. 
                    */
                     ((SELECT SUM(t1.MaxDiff)  
                    FROM (SELECT [MaxDiff] FROM gaps WHERE [date]<=t2.[date] 
                    ) t1 
                    )%91 - 
                    /* 
                        ISNULL added to include first value that always returns NULL 
                        Calculate Running sum upto and NOT including required date 
                        and find a remainder of division by 91 
                    */
                    ISNULL((SELECT SUM(t1.MaxDiff)  
                    FROM (SELECT [MaxDiff] FROM gaps WHERE [date]<t2.[date] 
                    ) t1 
                    )%91, 0) -- End ISNULL
                     <0 )
                    /* End Running sum upto and including required date */
                    OR
                    -- Gap between two nearest dates is greater than 90 
                    ((SELECT SUM(t1.MaxDiff)  
                    FROM (SELECT [MaxDiff] FROM gaps WHERE [date]<=t2.[date] 
                    ) t1 
                    ) - ISNULL((SELECT SUM(t1.MaxDiff)  
                    FROM (SELECT [MaxDiff] FROM gaps WHERE [date]<t2.[date] 
                    ) t1 
                    ), 0) > 90) 
                    THEN 1
                    ELSE 0
                    END 
                    AS [Qualifying]
                    FROM gaps t2
                    WHERE [date]=CONVERT(Date,@MyDate))
        -- What is neccesary to return when entered date is not in dbo.vGetVisits?
        RETURN @Returned_Value
    END
GO

SELECT 
dbo.udfLastHitRecursive(mydate) AS [Qualifying]
, [id]
, mydate 
FROM dbo.vGetVisits
ORDER BY mydate 

परिणाम

यहां छवि विवरण दर्ज करें

SQL सर्वर में रनिंग कुल की गणना करने के तरीके पर भी एक नज़र डालें

अद्यतन: कृपया प्रदर्शन परीक्षण के परिणाम नीचे देखें।

"90 दिनों के गैप" को खोजने के लिए इस्तेमाल किए जाने वाले अलग-अलग लॉजिक के कारण ypercube का और मेरे समाधानों को छोड़ दिया जाए तो पॉल व्हाइट के समाधान के अलग-अलग परिणाम लौट सकते हैं। इस के उपयोग की वजह से है DateDiff और DATEADD क्रमशः कार्य करता है।

उदाहरण के लिए:

SELECT DATEADD(DAY, 90, '2014-01-01 00:00:00.000')

रिटर्न '2014-04-01 00: 00: 00.000' का अर्थ है कि '2014-04-01 01: 00: 00.000' 90 दिनों के अंतराल से परे है

परंतु

SELECT DATEDIFF(DAY, '2014-01-01 00:00:00.000', '2014-04-01 01:00:00.000')

रिटर्न '90' का अर्थ है कि यह अभी भी अंतराल के भीतर है।

एक रिटेलर के उदाहरण पर विचार करें। इस मामले में एक खराब होने वाला उत्पाद बेचना जो '2014-01-01' तक '2014-01-01 23: 59: 59: 999' पर बिकता है, ठीक है। तो इस मामले में DatedIFF (DAY, ...) का मूल्य ठीक है।

एक और उदाहरण एक मरीज को देखा जा सकता है। किसी के लिए जो '2014-01-01 00: 00: 00: 000' पर आता है और '2014-01-01 23: 59: 59: 999' पर छोड़ता है, यह 0 (शून्य) दिन है यदि डेटेडिफ़ का उपयोग किया जाता है, भले ही वास्तविक प्रतीक्षा लगभग 24 घंटे की थी। फिर से रोगी जो '2014-01-01 23:59:59' पर आता है और '2014-01-02 00:00:01' पर चलता है, अगर एक दिन के लिए इंतजार किया जाता है, तो DatedIFF का उपयोग किया जाता है।

लेकिन मैं पीछे हटा।

मैंने दिनांकित समाधान छोड़ दिया और यहां तक ​​कि प्रदर्शन ने उन लोगों का परीक्षण किया लेकिन उन्हें वास्तव में अपनी लीग में होना चाहिए।

यह भी ध्यान दिया गया कि बड़े डेटासेट के लिए उसी दिन मूल्यों से बचना असंभव है। इसलिए यदि हमने 13 मिलियन रिकॉर्ड को 2 साल के डेटा के रूप में कहा है तो हम कुछ दिनों के लिए एक से अधिक रिकॉर्ड बनाएंगे। उन रिकॉर्डों को मेरे और यपरक्यूब के डेटेडिफिक सॉल्यूशन में सबसे पहले मौका दिया गया है। आशा है कि ypercube को यह बुरा नहीं लगता।

निम्न तालिका पर समाधान का परीक्षण किया गया

CREATE TABLE [dbo].[vGetVisits](
    [id] [int] NOT NULL,
    [mydate] [datetime] NOT NULL,
) 

दो अलग-अलग क्लस्टर इंडेक्स (इस मामले में mydate) के साथ:

CREATE CLUSTERED INDEX CI_mydate on vGetVisits(mydate) 
GO

टेबल को निम्न तरीके से आबाद किया गया था

SET NOCOUNT ON
GO

INSERT INTO dbo.vGetVisits(id, mydate)
VALUES (1, '01/01/1800')
GO

DECLARE @i bigint
SET @i=2

DECLARE @MaxRows bigint
SET @MaxRows=13001

WHILE @i<@MaxRows 
BEGIN
INSERT INTO dbo.vGetVisits(id, mydate)
VALUES (@i, DATEADD(day,FLOOR(RAND()*(3)),(SELECT MAX(mydate) FROM dbo.vGetVisits)))
SET @i=@i+1
END

मल्टीमिलियन पंक्ति केस के लिए INSERT को इस तरह से बदल दिया गया था कि 0-20 मिनट की प्रविष्टियाँ बेतरतीब ढंग से जोड़ी गईं।

सभी समाधान निम्नलिखित कोड में सावधानीपूर्वक लपेटे गए थे

SET NOCOUNT ON
GO

DECLARE @StartDate DATETIME

SET @StartDate = GETDATE()

--- Code goes here

PRINT 'Total milliseconds: ' + CONVERT(varchar, DATEDIFF(ms, @StartDate, GETDATE()))

परीक्षण किए गए वास्तविक कोड (किसी विशेष क्रम में नहीं):

Ypercube के दिनांकित समाधान ( YPC, DatedIFF )

DECLARE @cd TABLE
(   TheDate datetime PRIMARY KEY,
    Qualify INT NOT NULL
);

DECLARE
    @TheDate DATETIME,
    @Qualify     INT = 0,
    @PreviousCheckDate DATETIME = '1799-01-01 00:00:00' 


DECLARE c CURSOR
    LOCAL STATIC FORWARD_ONLY READ_ONLY
    FOR
SELECT 
   mydate
FROM 
 (SELECT
       RowNum = ROW_NUMBER() OVER(PARTITION BY cast(mydate as date) ORDER BY mydate)
       , mydate
   FROM 
       dbo.vGetVisits) Actions
WHERE
   RowNum = 1
ORDER BY 
  mydate;

OPEN c ;

FETCH NEXT FROM c INTO @TheDate ;

WHILE @@FETCH_STATUS = 0
BEGIN

    SET @Qualify = CASE WHEN DATEDIFF(day, @PreviousCheckDate, @Thedate) > 90 THEN 1 ELSE 0 END ;
    IF  @Qualify=1
    BEGIN
        INSERT @cd (TheDate, Qualify)
        SELECT @TheDate, @Qualify ;
        SET @PreviousCheckDate=@TheDate 
    END
    FETCH NEXT FROM c INTO @TheDate ;
END

CLOSE c;
DEALLOCATE c;


SELECT TheDate
    FROM @cd
    ORDER BY TheDate ;

Ypercube का DATEADD समाधान ( YPC, DATEADD )

DECLARE @cd TABLE
(   TheDate datetime PRIMARY KEY,
    Qualify INT NOT NULL
);

DECLARE
    @TheDate DATETIME,
    @Next_Date DATETIME,
    @Interesting_Date DATETIME,
    @Qualify     INT = 0

DECLARE c CURSOR
    LOCAL STATIC FORWARD_ONLY READ_ONLY
    FOR
  SELECT 
  [mydate]
  FROM [test].[dbo].[vGetVisits]
  ORDER BY mydate
  ;

OPEN c ;

FETCH NEXT FROM c INTO @TheDate ;

SET @Interesting_Date=@TheDate

INSERT @cd (TheDate, Qualify)
SELECT @TheDate, @Qualify ;

WHILE @@FETCH_STATUS = 0
BEGIN

    IF @TheDate>DATEADD(DAY, 90, @Interesting_Date)
    BEGIN
        INSERT @cd (TheDate, Qualify)
        SELECT @TheDate, @Qualify ;
        SET @Interesting_Date=@TheDate;
    END

    FETCH NEXT FROM c INTO @TheDate;
END

CLOSE c;
DEALLOCATE c;


SELECT TheDate
    FROM @cd
    ORDER BY TheDate ;

पॉल व्हाइट का समाधान ( पीडब्लू )

;WITH CTE AS
(
    SELECT TOP (1)
        T.[mydate]
    FROM dbo.vGetVisits AS T
    ORDER BY
        T.[mydate]

    UNION ALL

    SELECT
        SQ1.[mydate]
    FROM 
    (
        SELECT
            T.[mydate],
            rn = ROW_NUMBER() OVER (
                ORDER BY T.[mydate])
        FROM CTE
        JOIN dbo.vGetVisits AS T
            ON T.[mydate] > DATEADD(DAY, 90, CTE.[mydate])
    ) AS SQ1
    WHERE
        SQ1.rn = 1
)

SELECT 
    CTE.[mydate]
FROM CTE
OPTION (MAXRECURSION 0);

मेरा DATEADD समाधान ( PN, DATEADD )

DECLARE @cd TABLE
(   TheDate datetime PRIMARY KEY
);

DECLARE @TheDate DATETIME

SET @TheDate=(SELECT MIN(mydate) as mydate FROM [dbo].[vGetVisits])

WHILE (@TheDate IS NOT NULL)
    BEGIN

        INSERT @cd (TheDate) SELECT @TheDate;

        SET @TheDate=(  
            SELECT MIN(mydate) as mydate 
            FROM [dbo].[vGetVisits]
            WHERE mydate>DATEADD(DAY, 90, @TheDate)
                    )
    END

SELECT TheDate
    FROM @cd
    ORDER BY TheDate ;

मेरा दिनांकित समाधान ( PN, DatedIFF )

DECLARE @MinDate DATETIME;
SET @MinDate=(SELECT MIN(mydate) FROM dbo.vGetVisits);
    ;WITH gaps AS
    (
       SELECT 
       t1.[date]
       , t1.[MaxDiff]
       , SUM(t1.[MaxDiff]) OVER (ORDER BY t1.[date]) AS [Running Total]
            FROM
            (
                SELECT 
                mydate AS [date]
                , DATEDIFF(day,LAG(mydate, 1, mydate) OVER (ORDER BY mydate) , mydate) AS [MaxDiff] 
                FROM 
                    (SELECT
                    RowNum = ROW_NUMBER() OVER(PARTITION BY cast(mydate as date) ORDER BY mydate)
                    , mydate
                    FROM dbo.vGetVisits
                    ) Actions
                WHERE RowNum = 1
            ) t1
    )

    SELECT [date]
    FROM gaps t2
    WHERE                         
         ( ([Running Total])%91 - ([Running Total]- [MaxDiff])%91 <0 )      
         OR
         ( [MaxDiff] > 90) 
         OR
         ([date]=@MinDate)    
    ORDER BY [date]

मैं SQL Server 2012 का उपयोग कर रहा हूं, इसलिए मिकेल एरिकसन से माफी मांगता हूं, लेकिन उनके कोड का परीक्षण यहां नहीं किया जाएगा। मैं अभी भी DATADIFF और DATEADD के साथ कुछ डेटासेट पर विभिन्न मूल्यों को वापस करने के लिए उनके समाधान की उम्मीद करूंगा।

और वास्तविक परिणाम हैं: यहां छवि विवरण दर्ज करें


धन्यवाद की पावेल। मुझे वास्तव में समय के भीतर आपके समाधान का परिणाम नहीं मिला। मैंने अपनी टेस्टडेटा को 1000 पंक्तियों तक छोटा कर दिया जब तक कि मुझे 25 सेकंड पर निष्पादन का समय नहीं मिला। जब मैंने एक समूह को तारीख से जोड़ा और चयन में तारीखों में परिवर्तित किया, तो मुझे सही आउटपुट मिला! बस, मैंने अपने छोटे-टेडेटा-टेबल (13k पंक्तियों) के साथ क्वेरी को आगे बढ़ने दिया और 12 मिनट से अधिक हो गया, जिसका मतलब है कि अधिक ओ (nx) का प्रदर्शन! तो यह सेट के लिए उपयोगी लगता है कि निश्चित रूप से छोटा होगा।
स्वतंत्र

परीक्षण में आपके द्वारा उपयोग की गई तालिका क्या थी? कितनी पंक्तियाँ? हालांकि यह सुनिश्चित नहीं है कि आपको सही आउटपुट प्राप्त करने के लिए समूह को तारीख से क्यों जोड़ना पड़ा। कृपया अपने धन को अपने प्रश्न (अद्यतन) के एक भाग के रूप में प्रकाशित करने के लिए स्वतंत्र महसूस करें।
पावेल नेफियोडोव

नमस्ते! मैं उसे कल जोड़ूंगा। समूह को डुप्लिकेट तिथियों को संयोजित करना था। लेकिन मैं जल्दी में था (देर रात) और शायद यह पहले से ही कन्वर्ट (तारीख, z) जोड़कर किया गया था। पंक्तियों की मात्रा मेरी टिप्पणी में है। मैंने आपके समाधान के साथ 1000 पंक्तियों की कोशिश की। 12 मिनट के निष्पादन के साथ 13.000 पंक्तियों की भी कोशिश की। पॉल और यपरक्यूब्स को भी 130.000 और 13 मिलीयन टेबल पर लुभाया गया था। तालिका एक सादे मेज थी जिसमें कल और -2 साल पहले से रैंडम तारीखें बनाई गई थीं। दिनांक फ़ील्ड पर क्लस्टर इंडेक्स।
स्वतंत्र

0

ठीक है, क्या मुझे कुछ याद आया या आप सिर्फ पुनरावृत्ति को छोड़ कर खुद से क्यों नहीं जुड़ेंगे? यदि दिनांक प्राथमिक कुंजी है, तो यह अद्वितीय होना चाहिए, और कालानुक्रमिक क्रम में यदि आप अगली पंक्ति में ऑफसेट की गणना करने की योजना बनाते हैं

    DECLARE @T AS TABLE
  (
     TheDate DATETIME PRIMARY KEY
  );

INSERT @T
       (TheDate)
VALUES ('2014-01-01 11:00'),
       ('2014-01-03 10:00'),
       ('2014-01-04 09:30'),
       ('2014-04-01 10:00'),
       ('2014-05-01 11:00'),
       ('2014-07-01 09:00'),
       ('2014-07-31 08:00');

SELECT [T1].[TheDate]                               [first],
       [T2].[TheDate]                               [next],
       Datediff(day, [T1].[TheDate], [T2].[TheDate])[offset],
       ( CASE
           WHEN Datediff(day, [T1].[TheDate], [T2].[TheDate]) >= 30 THEN 1
           ELSE 0
         END )                                      [qualify]
FROM   @T[T1]
       LEFT JOIN @T[T2]
              ON [T2].[TheDate] = (SELECT Min([TheDate])
                                   FROM   @T
                                   WHERE  [TheDate] > [T1].[TheDate]) 

पैदावार

यहां छवि विवरण दर्ज करें

जब तक मैं पूरी तरह से कुछ महत्वपूर्ण याद नहीं करता ...।


2
आप शायद WHERE [TheDate] > [T1].[TheDate]90 दिनों के अंतर सीमा को ध्यान में रखना चाहते हैं । लेकिन फिर भी, आपका आउटपुट वांछित नहीं है।
ypercube y 21

महत्वपूर्ण: आपका कोड कहीं "90" होना चाहिए।
पावेल नेफियोडोव
हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.