API поиска Google – возвращается только 4 результата

После долгих экспериментов и гугления следующий код Python успешно вызывает Google Search APi, но возвращает только 4 результата: после прочтения документов Google Search API я подумал, что «start=» вернет дополнительные результаты: но этого не произошло.

Кто-нибудь может подсказать? Спасибо.

Код Python:

/usr/bin/python
import urllib
import simplejson

query = urllib.urlencode({'q' : 'site:example.com'})
url = 'http://ajax.googleapis.com/ajax/services/search/web?v=1.0&%s&start=50' \
  % (query)
search_results = urllib.urlopen(url)
json = simplejson.loads(search_results.read())
results = json['responseData']['results']
for i in results:
  print i['title'] + ": " + i['url']

person user353829    schedule 22.12.2010    source источник


Ответы (1)


Вариант запуска не дает вам больше результатов, он просто продвигает вас вперед на такое количество результатов. Думайте о результатах как об очереди. Начиная с 50, вы получите результаты 50, 51, 52 и 53.

При этом вы можете получить больше результатов, начиная с каждого 4-го результата:

import urllib
import simplejson

num_queries = 50*4 
query = urllib.urlencode({'q' : 'example'})
url = 'http://ajax.googleapis.com/ajax/services/search/web?v=1.0&%s' % query

for start in range(0, num_queries, 4):
    request_url = '{0}&start={1}'.format(url, start)
    search_results = urllib.urlopen(request_url)
    json = simplejson.loads(search_results.read())
    results = json['responseData']['results']
    for i in results:
        print i['title'] + ": " + i['url']
person Jake    schedule 06.01.2011
comment
каким-то образом search_results всегда пуст. почему это? - person doniyor; 06.09.2013