के लिए हेडर सेट करें मुझे पता है कि को बदलने के लिए आप scrapy shell -s USER_AGENT='custom user agent' 'http://www.example.com' कर सकते हैं, लेकिन आप अनुरोध हेडर कैसे जोड़ते हैं?
हम scrapy-splash middleware का उपयोग Splash जावास्क्रिप्ट इंजन के माध्यम से एक डॉकर कंटेनर के अंदर चलने वाले स्क्रैप किए गए HTML स्रोत को पारित करने के लिए कर रहे हैं। हम मकड़ी में स्पलैश उपयोग करना च