वह क्वेरी किस तालिका के स्तंभों का नाम लौटाएगी जहां सभी पंक्तियाँ NULL हैं?
वह क्वेरी किस तालिका के स्तंभों का नाम लौटाएगी जहां सभी पंक्तियाँ NULL हैं?
जवाबों:
टेस्टबेड:
create role stack;
create schema authorization stack;
set role stack;
create table my_table as
select generate_series(0,9) as id, 1 as val1, null::integer as val2;
create table my_table2 as
select generate_series(0,9) as id, 1 as val1, null::integer as val2, 3 as val3;
समारोह:
create function has_nonnulls(p_schema in text, p_table in text, p_column in text)
returns boolean language plpgsql as $$
declare
b boolean;
begin
execute 'select exists(select * from '||
p_table||' where '||p_column||' is not null)' into b;
return b;
end;$$;
क्वेरी:
select table_schema, table_name, column_name,
has_nonnulls(table_schema, table_name, column_name)
from information_schema.columns
where table_schema='stack';
परिणाम:
table_schema | table_name | column_name | has_nonnulls
--------------+------------+-------------+--------------
stack | my_table | id | t
stack | my_table | val1 | t
stack | my_table | val2 | f
stack | my_table2 | id | t
stack | my_table2 | val1 | t
stack | my_table2 | val2 | f
stack | my_table2 | val3 | t
(7 rows)
इसके अलावा आप कैटलॉग को क्वेरी करके एक अनुमानित उत्तर प्राप्त कर सकते हैं - यदि null_frac
शून्य शून्य है जो किसी नल को इंगित नहीं करता है, लेकिन 'वास्तविक' डेटा के खिलाफ डबल-चेक किया जाना चाहिए:
select tablename, attname, null_frac from pg_stats where schemaname='stack';
tablename | attname | null_frac
-----------+---------+-----------
my_table | id | 0
my_table | val1 | 0
my_table | val2 | 1
my_table2 | id | 0
my_table2 | val1 | 0
my_table2 | val2 | 1
my_table2 | val3 | 0
(7 rows)
pg_stats
यदि वे तालिका निर्माण में खाली हैं। मुझे कुछ हाउसकीपिंग करते समय आज यह पता चला। मुझे पता चला कि कुछ ऐतिहासिक एस्पैटिअल टेबल का उपयोग करके आयात किया गया था ogr2ogr
। यदि आयात किए जा रहे डेटा में कोई स्थानिक स्तंभ नहीं है, तो ogr2ogr
एक ज्यामिति स्तंभ पूर्ण बनाता है <NULL>
। मेरी pg_stats
आयातित आयातित तालिकाओं से कोई ज्यामिति स्तंभ नहीं है (इसमें उन तालिकाओं के लिए अन्य सभी स्तंभ हैं)। काफी अजीब, मैंने सोचा।
Postgresql में, आप आंकड़ों से सीधे डेटा प्राप्त कर सकते हैं:
vacuum analyze; -- if needed
select schemaname, tablename, attname
from pg_stats
where most_common_vals is null
and most_common_freqs is null
and histogram_bounds is null
and correlation is null
and null_frac = 1;
आपको कुछ झूठी सकारात्मकताएं मिल सकती हैं, इसलिए उम्मीदवारों को ढूंढने के बाद एक पुनरावृत्ति होती है।
null_frac=1
?
मैं आपको एसक्यूएल सर्वर 2008 के लिए काम करते हुए, टी-एसक्यूएल में अपना समाधान दिखाऊंगा। मैं पोस्टग्रेक्यूएल से परिचित नहीं हूं, लेकिन मुझे उम्मीद है कि आपको मेरे समाधान में कुछ मार्गदर्शन मिलेगा।
-- create test table
IF object_id ('dbo.TestTable') is not null
DROP table testTable
go
create table testTable (
id int identity primary key clustered,
nullColumn varchar(100) NULL,
notNullColumn varchar(100) not null,
combinedColumn varchar(100) NULL,
testTime datetime default getdate()
);
go
-- insert test data:
INSERT INTO testTable(nullColumn, notNullColumn, combinedColumn)
SELECT NULL, 'Test', 'Combination'
from sys.objects
union all
SELECT NULL, 'Test2', NULL
from sys.objects
select *
from testTable
-- FIXED SCRIPT FOR KNOWN TABLE (known structure) - find all completely NULL columns
select sum(datalength(id)) as SumColLength,
'id' as ColumnName
from dbo.testTable
UNION ALL
select sum(datalength(nullColumn)) as SumColLength,
'nullColumn' as ColumnName
from dbo.testTable
UNION ALL
select sum(datalength(notNullColumn)) as SumColLength,
'notNullColumn' as ColumnName
from dbo.testTable
UNION ALL
select sum(datalength(combinedColumn)) as SumColLength,
'combinedColumn' as ColumnName
from dbo.testTable
UNION ALL
select sum(datalength(testTime)) as SumColLength,
'testTime' as ColumnName
from dbo.testTable
-- DYNAMIC SCRIPT (unknown structure) - find all completely NULL columns
declare @sql varchar(max) = '', @tableName sysname = 'testTable';
SELECT @sql +=
'select sum(datalength(' + c.COLUMN_NAME + ')) as SumColLength,
''' + c.COLUMN_NAME + ''' as ColumnName
from ' + c.TABLE_SCHEMA + '.' + c.TABLE_NAME --as StatementToExecute
+ '
UNION ALL
'
FROM INFORMATION_SCHEMA.COLUMNS c
WHERE c.TABLE_NAME = @tableName;
SET @sql = left(@sql, len(@sql)-11)
print @sql;
exec (@sql);
मैंने संक्षेप में, 5 कॉलम, आईडी और टेस्टटाइम पहचान और गेटडेट () फ़ंक्शन द्वारा उत्पन्न किया जा रहा था, जबकि 3 वर्कर कॉलम ब्याज वाले थे। एक में केवल NULL मान होंगे, एक में कोई NULLs नहीं होगा, दूसरा एक संयुक्त स्तंभ होगा। स्क्रिप्ट का अंतिम परिणाम यह होगा कि स्क्रिप्ट सभी नल के रूप में कॉलम nullColumn की रिपोर्ट करेगी।
विचार प्रत्येक कॉलम के लिए फ़ंक्शन DATALENGTH की गणना करने के लिए था (किसी दिए गए अभिव्यक्ति के लिए बाइट्स की संख्या की गणना करता है)। इसलिए मैंने प्रत्येक स्तंभ की प्रत्येक पंक्ति के लिए DATALENGTH मान की गणना की और प्रति कॉलम एक SUM बनाया। यदि प्रति स्तंभ SUM NULL है, तो पूर्ण स्तंभ में NULL पंक्तियाँ हैं, अन्यथा कुछ डेटा अंदर है।
अब आपको PostgreSQL के लिए अनुवाद ढूंढना होगा और उम्मीद है कि एक सहयोगी आपकी मदद कर सकेगा। या हो सकता है कि एक अच्छा सिस्टम व्यू है जो दिखाएगा कि पहिया को फिर से मजबूत करने के लिए मैं कितना बेवकूफ हूं।
आपको ऐसी जानकारी के लिए सूचना कैटलॉग को क्वेरी करने की आवश्यकता है:
SELECT column_name FROM information_schema.columns WHERE table_name='your_table'
आपको अपने कॉलम के लिए मिलान तालिकाएँ देता है।
मेरे पास वर्तमान में पोस्टग्रेज इंस्टॉलेशन नहीं है लेकिन बाकी चीजें सरल होनी चाहिए
loop over the results of the above query and foreach result
send a COUNT(*) to the table
if the count is null, give back the column,
else ignore it
end foreach
कई संसाधनों से संयोजन करने के बाद, मैं इस फ़ंक्शन और क्वेरी के साथ सभी डेटाबेस तालिकाओं में सभी खाली कॉलमों को खोजने के लिए आया
CREATE OR REPLACE FUNCTION public.isEmptyColumn(IN table_name varchar, IN column_name varchar)
RETURNS boolean AS $$
declare
count integer;
BEGIN
execute FORMAT('SELECT COUNT(*) from %s WHERE %s IS NOT NULL', table_name, quote_ident(column_name)) into count;
RETURN (count = 0);
END; $$
LANGUAGE PLPGSQL;
SELECT s.table_name, s.column_name
FROM information_schema.columns s
WHERE (s.table_schema LIKE 'public') AND
(s.table_name NOT LIKE 'pg_%') AND
(public.isEmptyColumn(s.table_name, s.column_name))
का आनंद लें :)