Nginx प्रॉक्सी फ़ाइलें करने के लिए या S3

Question

तो मैं अपाचे से और Nginx पर दूर अपनी साइट से आगे बढ़ रही हैं और मुझे इस परिदृश्य में परेशानी आ रही:

उपयोगकर्ता एक तस्वीर अपलोड करता है। इस तस्वीर का आकार बदल गया है, और उसके बाद एस 3 की प्रतिलिपि बनाई गई है। यदि डिस्क पर उपयुक्त कमरा है (या फ़ाइल को S3 में स्थानांतरित नहीं किया जा सकता है), तो स्थानीय संस्करण रखा जाता है।

मुझे पी/निर्देशिका में पहली बार देखने के लिए इन छवियों (जैसे http://www.mysite.com/p/1_1.jpg) के लिए अनुरोध चाहिए। यदि कोई स्थानीय फ़ाइल मौजूद नहीं है, तो मैं S3 को अनुरोध प्रॉक्सी करना चाहता हूं और छवि प्रस्तुत करना चाहता हूं (लेकिन रीडायरेक्ट नहीं)।

Apache में, मैंने किया था यह इतना की तरह:

RewriteCond %{REQUEST_FILENAME} !-f 
RewriteRule ^p/([0-9]+_[0-9]+\.jpg)$ http://my_bucket.s3.amazonaws.com/$1 [P,L] 

Nginx में इस व्यवहार को दोहराने के लिए मेरे प्रयास है यह:

location /p/ { 
    if (-e $request_filename) { 
     break; 
    } 
    proxy_pass http://my_bucket.s3.amazonaws.com/; 
} 

क्या होता है कि प्रत्येक अनुरोध अमेज़न S3 हिट करने के लिए प्रयास करता है, भले ही फ़ाइल डिस्क पर मौजूद है (और यदि यह अमेज़ॅन पर मौजूद नहीं है, तो मुझे त्रुटियां मिलती हैं।) यदि मैं proxy_pass लाइन को हटा देता हूं, तो डिस्क पर फ़ाइलों के लिए अनुरोध करें।

इसे ठीक करने के तरीके पर कोई विचार?

Answer 1

इस try_files उपयोग का एक उदाहरण हो सकता है नहीं करना चाहिए?

location /p/ { 
    try_files $uri @s3; 
} 

location @s3{ 
    proxy_pass http://my_bucket.s3.amazonaws.com; 
} 

यकीन है कि वहाँ S3 यूआरएल

Answer 2

break काफी आप nginx आखिरी बात आप इसके बारे में पूछते हैं, जो समझ में आता है, तो आप के आसपास खुदाई मॉड्यूल बनाना शुरू करना होगा ... लेकिन मूल रूप से के साथ अपने proxy_pass की रक्षा की उम्मीद क्या करता है-नहीं-अस्तित्व नहीं कर रहा है संस्करण

if (-f $request_filename) { 
    break; 
} 
if(!-f $request_filename) 
    proxy_pass http://s3; 
} 

Answer 3

मैं अगर फ़ाइल मौजूद नहीं है देखने के लिए जाँच करके इस को हल करने समाप्त हो गया है, और यदि हां, तो उस अनुरोध को फिर से लिखने। मैं तो फिर से लिखा अनुरोध को पूरा करने और proxy_pass वहाँ की तरह ऐसा करते हैं,:

location /p/ { 
    if (!-f $request_filename) { 
    rewrite ^/p/(.*)$ /ps3/$1 last; 
    break; 
    } 
} 

location /ps3/ { 
    proxy_pass http://my_bucket.s3.amazonaws.com/; 
} 

Answer 4

पर एक निम्नलिखित स्लेश आप इस तरह अपने S3 प्रॉक्सी config सुधार सकता है नहीं है सुनिश्चित करें। https://stackoverflow.com/a/44749584 से अनुकूलित: मेरे coderwall पोस्ट :) रखने के लिए

location /p/ { 
    try_files $uri @s3; 
} 

location @s3 { 
    set $s3_bucket  'your_bucket.s3.amazonaws.com'; 
    set $url_full   '$1'; 

    proxy_http_version  1.1; 
    proxy_set_header  Host $s3_bucket; 
    proxy_set_header  Authorization ''; 
    proxy_hide_header  x-amz-id-2; 
    proxy_hide_header  x-amz-request-id; 
    proxy_hide_header  x-amz-meta-server-side-encryption; 
    proxy_hide_header  x-amz-server-side-encryption; 
    proxy_hide_header  Set-Cookie; 
    proxy_ignore_headers Set-Cookie; 
    proxy_intercept_errors on; 

    resolver    8.8.4.4 8.8.8.8 valid=300s; 
    resolver_timeout  10s; 
    proxy_pass    http://$s3_bucket$url_full; 
} 

Answer 5

धन्यवाद कैशिंग प्रयोजन के लिए आप इसे थोड़ा सुधार कर सकते हैं:

http { 

    proxy_cache_path   /tmp/cache levels=1:2 keys_zone=S3_CACHE:10m inactive=24h max_size=500m; 
    proxy_temp_path   /tmp/cache/temp; 

    server { 
    location ~* ^/cache/(.*) { 
     proxy_buffering  on; 
     proxy_hide_header  Set-Cookie; 
     proxy_ignore_headers Set-Cookie; 
     ... 
     proxy_cache   S3_CACHE; 
     proxy_cache_valid  24h; 
     proxy_pass    http://$s3_bucket/$url_full; 
    } 
    } 

} 

एक और सिफारिश 5 मिनट तक रिसोल्वर कैश विस्तार करने के लिए है:

resolver     8.8.4.4 8.8.8.8 valid=300s; 
resolver_timeout   10s;