Jak mogę zbierać statystyki z połączenia zwrotnego pająka?Jak zbierać statystyki w ramach wywołania zwrotnego pająka?
Przykład
class MySpider(Spider):
name = "myspider"
start_urls = ["http://example.com"]
def parse(self, response):
stats.set_value('foo', 'bar')
Nie jestem pewien co do import
lub jak zrobić stats
dostępne w ogóle.
hmm. zwraca '' ImportError: nie może importować przeszukiwacza nazw''. '' Plik "/usr/local/Cellar/python/2.7.6/Frameworks/Python.framework/Versions/2.7/lib/python2.7/site-packages/scrapy/stats.py", linia 1, w from scrapy.project import crawler'' –
mattes
To dziwne. Rozumiem, że twój podstawowy pająk działa bezbłędnie? – Talvalin
tak. działa tak długo, jak nie robię nic z '' stats''. Oto przykład tego, jak wygląda mój pająk: https://gist.github.com/mattes/10367042 – mattes