कैसे कुशलता से 20 निकटतम अंक खोजने के लिए [बंद]

Question

कहते हैं कि मैं अपने नज़दीक 20 सबसे करीबी व्यवसाय खोजना चाहता हूँ।

My table structure is like this:

    BusinessID  varchar(250)    utf8_unicode_ci         No  None        Browse distinct values  Change  Drop    Primary     Unique  Index   Fulltext
    Prominent   double          No  None        Browse distinct values  Change  Drop    Primary     Unique  Index   Fulltext
    LatLong     point           No  None        Browse distinct values  Change  Drop    Primary     Unique  Index   Fulltext
    FullTextSearch  varchar(600)    utf8_bin        No  None        Browse distinct values  Change  Drop    Primary     Unique  Index   Fulltext
With selected: Check All / Uncheck All With selected:
Print viewPrint view Propose table structurePropose table structureDocumentation
Add new fieldAdd field(s) At End of Table At Beginning of Table After
Indexes: Documentation
Action  Keyname Type    Unique  Packed  Field   Cardinality Collation   Null    Comment
Edit    Drop    PRIMARY BTREE   Yes No  BusinessID  1611454 A       
Edit    Drop    Prominent   BTREE   No  No  Prominent   0   A       
Edit    Drop    LatLong BTREE   No  No  LatLong (25)    0   A       
Edit    Drop    sx_mytable_coords   SPATIAL No  No  LatLong (32)    0   A       
Edit    Drop    FullTextSearch  FULLTEXT    No  No  FullTextSearch  0           

1.6 मिलियन biz हैं। बेशक यह उन सभी के लिए दूरी की गणना करने के लिए बेवकूफ है और फिर इसे सॉर्ट करें।

यही कारण है कि जहां भू स्थानिक सूचकांक सही में किक करता है?

तो एसक्यूएल कॉमन के लिए मुझे क्या चाहिए?

ध्यान दें:

1. मैं mysql myisam स्थानिक सूचकांक का उपयोग कर रहा हूं । हालाँकि मैंने इसे पहले निर्दिष्ट नहीं किया था। इसलिए मैं उन लोगों को स्वीकार करूंगा जो इसका जवाब मेरी प्रशंसा दिखाने और दूसरा सवाल पूछने के लिए देते हैं।
2. मैं पूरी तालिका के लिए दूरी की गणना नहीं करना चाहता
3. मैं किसी भी क्षेत्र के लिए दूरी की गणना नहीं करना चाहता जो अभी भी अक्षम हैं
4. मैं उचित अंकों के लिए दूरी की गणना करना चाहता हूं क्योंकि मैं अंकों को दूरी से क्रमबद्ध करना चाहता हूं और बिंदु 1-20, 21-40, 41-60 आदि को प्रदर्शित करने में सक्षम हूं।

Comments

क्रॉस पोस्ट dba.stackexchange.com/questions/19595/… (साथ ही बुरा जुजू लगता है जहां एक सवाल है जहां हर जवाब पोस्टजीआईएस को संबोधित कर रहा है)

— इवान कैरोल

Answer 1

स्थानिक प्रश्न निश्चित रूप से उपयोग करने की चीज है।

PostGIS के साथ मैं पहले इस तरह से कुछ सरलीकृत करने की कोशिश करूंगा और आवश्यकतानुसार रेंज को ट्विक करूंगा:

SELECT * 
FROM table AS a
WHERE ST_DWithin (mylocation, a.LatLong, 10000) -- 10km
ORDER BY ST_Distance (mylocation, a.LatLong)
LIMIT 20

यह स्थानिक सूचकांक का उपयोग करते हुए अंक (वास्तव में उनके बाउंडिंग बॉक्स) की तुलना करेगा, इसलिए यह तेज होना चाहिए। एक और दृष्टिकोण जो मन में आता है वह आपके स्थान को बफर कर रहा है और फिर मूल डेटा के साथ उस बफर को इंटरसेप्ट करता है, जो और भी अधिक कुशल हो सकता है।

Answer 2

यदि आप सभी निकटता बिंदु खोज (निकटतम पड़ोसी प्रश्न) खोज रहे हैं, तो आप उसके लिए पुराने ST_DWithin या ST_Distance + ORDER BY का उपयोग नहीं करना चाहते हैं।

अब और नहीं।

अब जब PostGIS 2.0 को भेज दिया गया है, तो आपको knngist इंडेक्स सपोर्ट (एक देशी पोस्टग्रेक्यूएल फीचर) का उपयोग करना चाहिए। यह तेजी से परिमाण के आदेश होंगे।

इस ब्लॉग प्रविष्टि का एक अंश जो बताता है कि PostGIS के बिना knn gist का उपयोग कैसे किया जाता है :

$ create table test ( position point );

CREATE TABLE
Table created. Now let’s insert some random points:
$ insert into test (position) select point( random() * 1000, random() * 1000) from generate_series(1,1000000);

INSERT 0 1000000
1 million points should be enough for my example. All of them have both X and Y in range <0, 1000). Now we just need the index:
$ create index q on test using gist ( position );

CREATE INDEX
And we can find some rows close to center of the points cloud:
$ select *, position <-> point(500,500) from test order by position <-> point(500,500) limit 10;

              position               |     ?column?

-------------------------------------+-------------------

 (499.965638387948,499.452529009432) | 0.548548271254899

 (500.473062973469,500.450353138149) |  0.65315122744144

 (500.277776736766,500.743471086025) | 0.793668174518778

 (499.986605718732,500.844359863549) | 0.844466095200968

 (500.858531333506,500.130807515234) | 0.868439207229501

 (500.96702715382,499.853323679417)  | 0.978087654172406

 (500.975443981588,500.170825514942) | 0.990289007195055

 (499.201623722911,499.368405900896) |  1.01799596553335

 (498.899147845805,500.683960970491) |  1.29602394829404

 (498.38217580691,499.178630765527)  |  1.81438764851559

(10 rows)
And how about speed?
$ explain analyze select *, position <-> point(500,500) from test order by position <-> point(500,500) limit 10;

                                                        QUERY PLAN

--------------------------------------------------------------------------------------------------------------------------

 Limit  (cost=0.00..0.77 rows=10 width=16) (actual time=0.164..0.475 rows=10 loops=1)

   ->  Index Scan using q on test  (cost=0.00..76512.60 rows=1000000 width=16) (actual time=0.163..0.473 rows=10 loops=1)

         Order By: ("position" <-> '(500,500)'::point)

 Total runtime: 0.505 ms

(4 rows)

काफी दिलचस्प है, सूचकांक ट्रैवर्सल निकटता के क्रम में सुविधाओं को वापस कर देगा, इसलिए परिणामों के लिए एक प्रकार (यानी ऑर्डर द्वारा) करने की कोई आवश्यकता नहीं है!

हालाँकि, यदि आप इसका उपयोग PostGIS के साथ करना चाहते हैं, तो अब यह वास्तव में आसान है। बस इन निर्देशों का पालन करें ।

प्रासंगिक हिस्सा यह है:

SELECT name, gid
FROM geonames
ORDER BY geom <-> st_setsrid(st_makepoint(-90,40),4326)
LIMIT 10;

लेकिन इसके बारे में मेरा शब्द मत लो। समय खुद का है :)

Comments

यह एक अच्छा जवाब होगा। हालाँकि, मैं mysql myisam का उपयोग कर रहा हूँ। मैं जोड़ना भूल गया।

— user4951

तो +1 लेकिन मैं अपने उत्तर के रूप में इसका चयन नहीं कर सकता। क्या मुझे एक और सवाल पैदा करना चाहिए?

— user4951 3

@JimThio MySQL में निकटतम पड़ोसी इंडेक्स नहीं है, इसलिए आपको निकटतम पड़ोसी क्वेरी (ST_Dwithin ORDER BY ST_Distance के साथ) पर भरोसा करना होगा। मध्य युग में आपका स्वागत है :)

— रागी यासर बुरहं

तो मैं मोंगोडब जाने के लिए मिला? मुझे अंदाजा लगाने दो। यदि आप 20 निकटतम बिंदुओं को खोजने जैसे सरल कार्य भी नहीं कर सकते तो mysql पर स्थानिक सूचकांक होने की क्या बात है?

— user4951

आप विंडो का उपयोग करके निकटतम बिंदु पा सकते हैं। यह किसी अन्य स्थानिक डेटाबेस के लिए सच है जैसा कि @lynxlynxlynx द्वारा वर्णित है। आप विंडो को दो से गुणा करके बढ़ाते रह सकते हैं। हां, वही मानगो या किसी अन्य डेटाबेस के लिए सही है। मुद्दा यह है कि आपने अधिकांश अन्य विशेषताओं में कटौती की है। इसके अलावा, हर कोई जानता है कि अभी हाल तक, MySQL कभी भी किसी भी स्थानिक के लिए एक गंभीर दावेदार नहीं था।

— रागी यासर बुरहुम

Answer 3

PostgreSQL 9.1 पर PostGIS 2.0 के साथ, आप KNN अनुक्रमित निकटतम पड़ोसी ऑपरेटर का उपयोग कर सकते हैं , जैसे:

SELECT *, geom <-> ST_MakePoint(-90, 40) AS distance
FROM table
ORDER BY geom <-> ST_MakePoint(-90, 40)
LIMIT 20 OFFSET 0;

ऊपर कुछ मिलीसेकेंड के भीतर क्वेरी करनी चाहिए।

20 के अगले गुणकों के लिए OFFSET 20, को संशोधित करें OFFSET 40, आदि ...

Comments

क्या मैं जान सकता हूं कि इसका अर्थ क्या है <->? धन्यवाद।

— नॉर्थट्री

<->एक ऑपरेटर है जो 2D दूरी लौटाता है।

— माइक टी

Answer 4

MySQL स्थानिक

यहां हर कोई आपको बता रहा है कि बिना फायदे बताए केएनएन का उपयोग करके पोस्टग्रेक्सेल के साथ कैसे करें। MySQL का उपयोग करके आप सभी पड़ोसियों के लिए दूरी की गणना किए बिना निकटतम पड़ोसी का निर्धारण नहीं कर सकते । यह बहुत धीमी है। PostgreSQL के साथ यह एक सूचकांक पर किया जा सकता है। न तो, MySQL और न ही MariaDB वर्तमान में KNN का समर्थन करता है