अब क्या विकल्प हैं कि Google वेब खोज एपीआई को हटा दिया गया है? [बन्द है]


322

Google वेब खोज एपीआई को हटा दिया गया है और इसे कस्टम खोज एपीआई ( http://code.google.com/apis/websearch/ देखें ) के साथ बदल दिया गया है ।

मैं पूरे वेब को खोजना चाहता था, लेकिन ऐसा लगता है कि नई एपीआई के साथ केवल कस्टम साइट ही खोजे जा सकते हैं।

क्या पूरे वेब प्रोग्राम को सर्च करने का कोई तरीका है? मैं एक जावा प्रोग्राम से JSON का उपयोग करके पुराने एपीआई को क्वेरी करने में सक्षम था।


3
ठीक है, मैंने इस पर बहुत शोध किया है और ऐसा लगता है कि एकमात्र समाधान याहू बॉस है
दान

कस्टम खोज API वह नहीं है जो अधिकांश लोग ढूंढ रहे हैं: - / searchapi.io को एक नज़र दें !
स्टेन स्मल्डर्स

मैंने विभिन्न खोज APIs पर POCs किए हैं जो बहुत सारे फीचर्स प्रदान करते हैं और कुछ ही मिनटों में इसे लागू करना बहुत आसान है। स्विफ्टाइप ( Swiftype.com ), Cludo ( cludo.com/en ), Algolia ( algolia.com/doc ) एपीआई हैं जिन्हें मैंने लागू किया है और साथ ही परीक्षण किया है। मैं विस्तार से उत्तर भी दे सकता था लेकिन यह प्रश्न बंद है।
आशीष कुमार

2
सबसे अच्छा उपाय सर्पपी
हार्टेटर

जवाबों:


32

आप उन्हें केवल ब्राउज़र के माध्यम से भेज सकते हैं, और फिर HTML को पार्स कर सकते हैं, यही मैंने हमेशा किया है, यहां तक ​​कि यूट्यूब जैसी चीजों के लिए भी।


64
मैंने बताया कि गोइंग स्पाइडरिंग की सेवा की शर्तें ...
स्टीवन ए। लोव

52
से टीओएस : "आप विशेष रूप से नहीं पहुँच करने के लिए सहमत (या पहुंच का प्रयास) (स्क्रिप्ट या वेब क्रॉलर के उपयोग सहित) ... किसी भी स्वचालित माध्यम सेवाओं के किसी भी"
ændrük

18
"सेवा प्रदाता के साथ सेवा की शर्तों का उल्लंघन करें" कभी भी अच्छी सलाह नहीं है। पार्सिंग वेबपेज एक ऐसी चीज है जो एक दिन से अगले दिन तक बिना किसी चेतावनी के टूट जाती है, यह भयानक सलाह है - यही कारण है कि इसे और अधिक डाउनवोट किया गया था।
WhyNotHugo

143
हाँ, यह सेवा की शर्तों को तोड़ता है, लेकिन व्यक्तिगत रूप से मुझे इस बारे में चिंता नहीं होगी। Google थोड़ा सा स्क्रैपिंग को संभाल सकता है, आखिरकार उन्होंने अन्य लोगों की साइटों को नष्ट करने का भाग्य बनाया है।
jimbo2087

106
चलो करते हैं। इतना भोला मत बनो। Google आपके गले को नीचे करने के लिए बाध्य नहीं कर सकता है। ToS का उल्लंघन करने के लिए, आपको पहले इसके साथ सहमत होना चाहिए (लिखित रूप में, या 'हाँ, मैं शर्तें स्वीकार करता हूं) जैसे बटन पर क्लिक करके। इस पर विचार करें: मैंने अपने वेब पेज पर एक TOS रखा है कि उस पृष्ठ पर आने वाले प्रत्येक व्यक्ति को मुझे $ 10000 देने होंगे। क्या मैं अपने दर्शकों पर इस ToS को लागू कर सकता हूं? मुझे तुरंत करना पड़ सकता है।
Migrate2Lazarus मेरी प्रोफाइल

482

हां, Google कस्टम खोज ने अब पुराने खोज API को बदल दिया है, लेकिन फिर भी आप संपूर्ण वेब पर खोज करने के लिए Google कस्टम खोज का उपयोग कर सकते हैं , हालाँकि कस्टम खोज सेटअप से चरण स्पष्ट नहीं हैं।

Google कस्टम खोज इंजन बनाने के लिए जो संपूर्ण वेब को खोजता है:

  1. Google कस्टम खोज मुखपृष्ठ ( http://www.google.com/cse/ ) से, कस्टम खोज इंजन बनाएँ पर क्लिक करें।
  2. अपने खोज इंजन के लिए एक नाम और विवरण टाइप करें।
  3. अपने खोज इंजन को परिभाषित करने के लिए, खोज बॉक्स में साइट्स में, कम से कम एक मान्य URL दर्ज करें (अभी के लिए, बस इस स्क्रीन को पाने के लिए www.anyurl.com को डालें। इस पर बाद में और देखें)।
  4. इच्छित सीएसई संस्करण का चयन करें और सेवा की शर्तें स्वीकार करें, फिर अगला पर क्लिक करें। इच्छित लेआउट विकल्प का चयन करें, और उसके बाद अगला क्लिक करें।
  5. अपने नियंत्रण कक्ष पर नेविगेट करने के लिए अगले चरण अनुभाग के अंतर्गत किसी भी लिंक पर क्लिक करें।
  6. बाएं हाथ के मेनू में, नियंत्रण कक्ष के तहत, मूल बातें पर क्लिक करें।
  7. खोज प्राथमिकता अनुभाग में, संपूर्ण वेब खोजें चुनें लेकिन शामिल साइटों पर ज़ोर दें।
  8. परिवर्तन सहेजें पर क्लिक करें।
  9. बाएं हाथ के मेनू में, नियंत्रण कक्ष के अंतर्गत, साइटें पर क्लिक करें।
  10. प्रारंभिक सेटअप प्रक्रिया के दौरान आपके द्वारा दर्ज की गई साइट को हटाएं।

अब आपका कस्टम सर्च इंजन पूरे वेब पर सर्च करेगा।

मूल्य निर्धारण

  • Google कस्टम खोज आपको मुफ्त में प्रति दिन 100 प्रश्न देता है।
  • उसके बाद आप प्रति 1000 प्रश्नों पर $ 5 का भुगतान करते हैं।
  • प्रतिदिन अधिकतम 10,000 प्रश्न होते हैं।

स्रोत: https://developers.google.com/custom-search/json-api/v1/overview#Pricing


  • सामान्य Google खोज (कोई समानार्थी शब्द, "खुफिया" आदि) की तुलना में खोज की गुणवत्ता बहुत कम है)
  • ऐसा लगता है कि Google इस सेवा को पूरी तरह से बंद करने की योजना बना रहा है।

26
इसके लिए धन्यवाद। उम्मीद है कि यह एक मान्य प्रक्रिया है और Google द्वारा प्लग किए जाने की प्रतीक्षा नहीं कर रहा है!
मजेटेक

9
धन्यवाद! यह संभवतः इंटरनेट पर एकमात्र उत्तर है जिसने मेरे प्रश्न को संबोधित किया है। यह दिमाग से टकरा रहा है कि Google उनकी मुख्य सेवा के लिए प्रत्यक्ष एपीआई समर्थन क्यों समाप्त करेगा।
स्पैमगुए

7
लेकिन इसका उपयोग कैसे करें?
नवारा

61
चेतावनी: हमने निशुल्क संस्करण का उपयोग करके विकास किया, लेकिन भुगतान किए गए संस्करण (100 से अधिक खोजों को करने के लिए) में अपग्रेड करने के लिए, Google आपको "संपूर्ण वेब पर खोज करने पर भी शामिल साइटों को बंद करने" के लिए मजबूर करता है
ब्रायन लार्सन

5
"1 अप्रैल 2017 को, Google Google साइट खोज की बिक्री बंद कर देगा। इस तारीख से पहले सभी नई खरीद और नवीनीकरण करना होगा। उत्पाद 1 अप्रैल, 2018 तक पूरी तरह से बंद हो जाएगा।"
गजस

55

Google कस्टम खोज (जैसा कि शीर्ष रेटेड उत्तरों में वकालत की गई है) अच्छी तरह से काम करती है, लेकिन यह बहुत महंगा है, इसके प्रतियोगियों की तुलना में (नीचे) या अन्य Google एपीआई की तुलना में। इसमें एक छोटा सा मुफ्त स्तरीय (100 प्रश्न / दिन) और प्रति 1000 क्वेरी में $ 5 की बहुत अधिक कीमत है।

वे साइट खोज में अपग्रेड करने का विकल्प प्रदान करते हैं, जिसकी कीमतें थोड़ी बेहतर हैं, लेकिन इसका मतलब एक साइट (अपनी खुद की) की खोज करना है, इसलिए यह वास्तव में कुछ अलग है - अपग्रेड नहीं।

मुख्य विकल्प प्रतीत होते हैं:

बिंग सर्च एपीआई
https://datamarket.azure.com/dataset/5BA839F1-12CE-4CCE-BF57-A49D98D29A44
जिसमें 5000q / माह का मुफ्त टियर है, और 5 पैसे प्रति पेनी से शुरू होने वाली कीमतें, और कोई हार्ड लिमिट नहीं है।

अद्यतन: 2016 के अंत में यह एपीआई अपने एज़्योर समकक्ष "कॉग्निटिव सर्विसेज बिंग सर्च एपीआई" के पक्ष में बंद था:
https://azure.microsoft.com/en-us/services/cognitive-services/search/

मूल्य निर्धारण चार्ट के लिए यहां देखें , जो 1,000 लेनदेन के लिए US $ 3 / m से शुरू होता है। जब तक मैं कुछ याद कर रहा हूँ यह काफी महंगा है।

याहू बॉस सर्च एपीआई
अद्यतन: 31 मार्च, 2016 को बंद कर दिया गया था। http://developer.yahoo.com/boss/search/
पूरे वेब खोजों के लिए लगभग 12 प्रश्नों / पैसा शुरू होने वाली कीमतों के साथ।

और कुछ मैंने पहले नहीं सुना है:

http://www.gigablast.com/searchfeed.html

http://www.faroo.com/hp/api/api.html

http://www.commoncrawl.org/

http://www.entireweb.com/search_api/implementation/
[बंद - जैसा कि नीचे बताया गया है]

इस एसओ पोस्ट पर इनमें से कुछ की चर्चा थोड़ी है ।
[ऑफ-टॉपिक बनने के लिए बंद हो गया और अब चला गया है]


2
बिंग सर्च एपीआई संस्करण 5 अब सभी बिंग सर्च एपीआई (वेब, इमेजेज, वीडियो, न्यूज सर्च) पर प्रति माह 1,000 लेनदेन करने की अनुमति देता है - microsoft.com/cognitive-services/en-us/pricing । मैंने कुछ नमूने एक साथ रखे - mvark.blogspot.in/2016/06/…
mvark

entireweb.com सेवा बंद कर दिया के रूप में यहाँ देखा entireweb.com/services
Wessam एल Mahdy

15 दिसंबर, 2016 को बिंग वेब सर्च एपीआई एज़्योर मार्केटप्लेस ( azure.microsoft.com/en-us/services/cognitive-services/search ) द्वारा संज्ञानात्मक सेवाओं के तहत आगे बढ़ेगा , जिसके लिए एक सदस्यता के लिए भी फोन + क्रेडिट कार्ड सत्यापन की आवश्यकता होती है एक मुक्त)।
गिलाद मेयानी

Bing API से: "DataMarket और Data Services को रिटायर किया जा रहा है और 12/31/2016 के बाद नए ऑर्डर स्वीकार करना बंद कर देगा। मौजूदा सदस्यताएँ 3/31/2017 से शुरू होकर रद्द कर दी जाएंगी। यदि आप विकल्प के लिए अपने सेवा प्रदाता से संपर्क करें। सेवा जारी रखना चाहते हैं। "
दिमित्री जैतसेव

परिवर्तन को इंगित करने के लिए धन्यवाद - मैंने तदनुसार उत्तर अपडेट किया है।
टॉम

27

यहां कस्टम खोज नियंत्रण पैनल के नीचे एक विकल्प दिया गया है: "खोज करने के लिए साइटें" , आप "संपूर्ण वेब पर खोजें लेकिन शामिल साइटों पर जोर दें" चुन सकते हैं

कस्टम खोज नियंत्रण कक्ष - खोज करने के लिए साइटें


1
क्या यह अभी भी आपके लिए काम करता है?
देजेल

हां, यह अभी भी काम करता है।

5
जब आप भुगतान की गई खोज में अपग्रेड करते हैं तो Google आपको वह विकल्प बंद करने के लिए मजबूर करता है। और मुफ्त में 100 खोजों की सीमा है।
ब्रायन लार्सन

1
@ यिशु, पृष्ठ https://support.google.com/customsearch/answer/141877?hl=en " आप संपूर्ण वेब पर खोज करने के लिए Google साइट खोज को कॉन्फ़िगर क्यों नहीं कर सकता " बताता है ?
पेसियर

@ स्पेसर, मुझे इसके बारे में कोई पता नहीं है। शायद नीति बदल गई है?
यिशु फेंग

14

उनके परिणाम सीमित हैं, लेकिन एक अच्छी शुरुआत है।
afro360

@ जेक, पहले इस बारे में नहीं सुना। वे अपने खोज परिणाम कहां से प्राप्त करते हैं?
पेसियर

7
फ़ारो के लिए संभावित सौदा ब्रेकर यह है कि आपकी एपीआई कुंजी पंजीकरण के दौरान आपके द्वारा निर्दिष्ट आईपी पते तक ही सीमित है।
अपवाद

6
क्या ये लोग अभी भी चालू हैं? मैंने एपीआई कुंजी का अनुरोध किया है और कुछ भी नहीं सुना है।
पॉल व्हेलन

5

मैं अभी कॉमन क्रॉल से आया हूं।

http://www.commoncrawl.org/

जवाब हो सकता है हम सब देख रहे हैं !!


3
इसका एक सीमित सूचकांक है, जो वर्ष में एक बार ताज़ा होता है। और यह आखिरकार काफी महंगा है, क्योंकि आपको अमेज़न एस 3 में प्लग करना होगा।
गिलाउम लेबोर्जियो

@GuillaumeLebourgeois, महंगा? मुझे नहीं लगता कि यह सच है। यह गैर-लाभकारी है। संपूर्ण 102 टीबी डेटा डाउनलोड के लिए मुफ्त है।
पचेरियर

लागत एडब्ल्यूएस से जुड़ने के लिए है जहां आप इस तक पहुंच सकते हैं। यदि आप एक छात्र हैं, तो आप उनके मुफ्त टियर के लिए पात्र हैं, लेकिन फिर भी हस्तांतरण लागत आदि हो सकते हैं; और यदि आप फ्री टियर में नहीं हैं, तो लागतें चल रही हैं।
ट्रिपलआई

लगता है कि आम क्रॉल अब मासिक रूप से अपडेट किया जाता है
जैक टाक

4

डॉक्स के ऊपर एक नोट है :

नोट: Google वेब सर्च एपीआई को आधिकारिक तौर पर 1 नवंबर, 2010 के रूप में पदावनत किया गया है। यह हमारी अपग्रेडेशन नीति के अनुसार काम करना जारी रखेगा , लेकिन आपके द्वारा प्रति दिन किए जाने वाले अनुरोधों की संख्या सीमित होगी। इसलिए, हम आपको नए कस्टम खोज API पर जाने के लिए प्रोत्साहित करते हैं ।

प्रतिवाद नीति कहती है कि वे 3 साल के लिए एपीआई का प्रदर्शन जारी रहेगा। इसलिए यदि आपके पास पहले से ही एक एप्लिकेशन है जो पुराने एपीआई का उपयोग करता है, तो आपको अभी तक चीजें बदलने के लिए जल्दी नहीं है। यदि आप एक नया एप्लिकेशन लिख रहे हैं, तो कस्टम खोज API का उपयोग करें । पायथन में ऐसा करने के लिए मेरा जवाब यहां देखें , लेकिन विचार किसी भी भाषा के लिए समान है।


8
और यह मुफ़्त नहीं है .... "$ 1000 प्रति 1000 प्रश्न" ... बहुत ज्यादा मुफ्त नहीं!
उपराष्ट्रपति

1
यह उत्तर अब अप्रचलित है क्योंकि तीन वर्ष ऊपर हैं और 2014/09/29 बीत चुके हैं।
नानोफारड

CustomeSearchAPI सभी वेबसाइटों में नहीं है - यह उपयोगकर्ता वेबसाइटों के लिए है
Dejell


1

आप Google कस्टम खोज मुखपृष्ठ ( http://www.google.com/cse/ ) से "कस्टम" हर जगह कस्टम खोज इंजन बना सकते हैं । नया इंजन जोड़ने के दौरान, आपको बस 'उन्नत' पर क्लिक करना चाहिए। वहां आप Schema.org साइट प्रकार प्रदान कर सकते हैं। ' थिंग ' सबसे सामान्य प्रकार है, जो सभी वेब को कवर करता है।


मुझे नहीं मिला। क्या यह आपके लिए काम करता है?
देजेल

हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.