SSD Nodes Learn Hosting plans →
मार्गदर्शक Matt Connorद्वारे Matt Connor

HTTP म्हणजे काय? Server admin साठी मार्गदर्शक

Server चालवणाऱ्यांसाठी HTTP समजून घ्या: methods, status codes, महत्त्वाचे headers, nginx logs, तसेच HTTP/3 आणि TLS यांचे स्थान स्पष्टपणे जाणून घ्या.

HTTP म्हणजे काय?

HTTP (hypertext transfer protocol) हा client आणि web server यांनी एखाद्या गोष्टीची मागणी करण्यासाठी आणि ती परत पाठवण्यासाठी वापरलेल्या नियमांचा संच आहे. client एक request पाठवतो. त्यात GET सारखी method, /pricing सारखा path, protocol version, headers ची यादी आणि कधीकधी body असतो. server status code, जसे की 200, पाठवून उत्तर देतो. त्यानंतर server चे स्वतःचे headers आणि सामान्यतः body असतो. तुमच्या server वरील प्रत्येक page view आणि प्रत्येक API (application programming interface) call म्हणजे हीच देवाणघेवाण पुन्हा पुन्हा होणे.

HTTP स्वतःची कोणतीही state ठेवत नाही. तुम्ही एका सेकंदापूर्वी काय मागितले होते हे server ला लक्षात राहत नाही. त्यामुळे memory सारखे वर्तन आवश्यक असलेली कोणतीही गोष्ट, उदाहरणार्थ login session, प्रत्येक request मधील header मध्ये पाठवली जाते. या एका गुणधर्मामुळे पुढील बराचसा व्यवहार स्पष्ट होतो: caching पूर्णपणे header वर आधारित असते आणि load balancer तुमची पुढील request वेगळ्या backend कडे पाठवू शकतो, तरीही कोणतीही समस्या निर्माण होत नाही.

खालील सर्व माहिती server च्या बाजूने हे मॉडेल कसे दिसते ते स्पष्ट करते. ती तुमच्या access log आणि nginx config मध्ये दिसते.

कच्ची request आणि response, annotationसह

येथे संपूर्ण HTTP/1.1 request आहे. रिकामी ओळ headers समाप्त करते. त्या ओळीनंतरची प्रत्येक गोष्ट body असते. GET मध्ये सामान्यतः body नसते.

GET /pricing HTTP/1.1
Host: example.com
User-Agent: curl/8.5.0
Accept: */*
Accept-Encoding: gzip
  • GET ही method आहे. तिच्याद्वारे कोणती कृती करायची ते सांगितले जाते. GET वाचते, POST डेटा पाठवते, PUT बदलते, DELETE काढून टाकते आणि HEAD body न पाठवता GET चे headers मागते.
  • /pricing हा path आहे. hostname हा request line चा भाग नसतो. म्हणून पुढील header आवश्यक असतो.
  • HTTP/1.1 ही client वापरत असलेल्या protocol ची version आहे.
  • Host: example.com मध्ये client ला हवा असलेला site नमूद केला जातो. HTTP/1.1 मध्ये तो आवश्यक आहे. त्यामुळे असा header नसलेल्या request ला nginx 400 Bad Request ने उत्तर देतो.
  • उर्वरित headers preferences दर्शवतात. Accept-Encoding: gzip नुसार client data decompress करू शकतो. त्यामुळे server ला body compress करण्याची परवानगी असते.

Response ची रचना अशीच असते. फरक एवढाच की त्याच्या सुरुवातीला status line असते.

HTTP/1.1 200 OK
Date: Thu, 06 Aug 2026 09:12:44 GMT
Server: nginx
Content-Type: text/html; charset=utf-8
Content-Length: 5310
Cache-Control: public, max-age=300

<!doctype html>...
  • 200 OK हा reason phrase सह status code आहे. महत्त्व code चे असते. Phrase केवळ अतिरिक्त माहिती असते आणि clients ती दुर्लक्षित करतात.
  • Content-Type नंतर येणाऱ्या bytes कडे client ने कसे पाहावे ते सांगते.
  • Content-Length ही bytes मधील body size आहे. त्यामुळे body कुठे संपते हे client ला समजते. Size आधी माहीत नसल्यास server त्याऐवजी Transfer-Encoding: chunked पाठवतो आणि zero length chunk ने शेवट दर्शवतो.
  • Cache-Control browser आणि मधील कोणत्याही cache ला हा response किती काळ fresh मानता येईल ते सांगते. त्याचे वय max-age seconds पेक्षा जास्त झाल्यावर तो stale होतो. याचा अर्थ तो deleted झाला असा नाही. Cache stale copy ठेवू शकतो आणि संपूर्ण body पुन्हा download करण्याऐवजी तुमच्या server कडे revalidation करू शकतो.
  • दोन्ही दिशांमध्ये headers नंतरची रिकामी ओळ headers आणि body यांना वेगळे करते.

Header names साठी uppercase आणि lowercase मध्ये फरक नसतो. प्रत्येक line चा शेवट bare newline ऐवजी carriage return नंतर line feed ने होतो. हे तुम्ही हाताने type करणार नाही. मात्र packet capture मध्ये ते दिसतील.

प्रत्यक्ष request-response pair पाहण्यासाठी, तुमच्या मालकीच्या site वर हे command चालवा:

curl -sS -o /dev/null -D - https://example.com/

-D - response headers तुमच्या terminal वर लिहिते आणि -o /dev/null body टाकून देते. curl -I पेक्षा हे वापरणे योग्य आहे, कारण -I एक HEAD request पाठवते. HEAD ला GET पेक्षा वेगळ्या पद्धतीने हाताळणारा application server, आणि असे अनेक servers आहेत, त्यानंतर browser ला कधीही न मिळणारे headers दाखवेल. curl -v दोन्ही बाजू print करते. Request lines > ने आणि response lines < ने चिन्हांकित केल्या जातात.

nginx access log मधील request line कशी दिसते

nginx सोबत combined log format येतो. त्याची व्याख्या अशी आहे:

log_format combined '$remote_addr - $remote_user [$time_local] '
                    '"$request" $status $body_bytes_sent '
                    '"$http_referer" "$http_user_agent"';

त्यातून तयार होणारी एक ओळ:

203.0.113.45 - - [06/Aug/2026:09:12:44 +0000] "GET /pricing HTTP/1.1" 200 5310 "https://example.com/" "Mozilla/5.0 (X11; Linux x86_64) Chrome/127.0.0.0 Safari/537.36"
  • 203.0.113.45 म्हणजे $remote_addr. हा TCP (transmission control protocol) connection उघडणारा address आहे. Proxy मागे असल्यास येथे visitor चा address नसून proxy चा address दिसतो, जोपर्यंत पुढे वर्णन केलेले realip module वापरून तो बदलण्यासाठी configuration केलेली नसेल.
  • पहिला - हा निश्चित placeholder आहे. दुसरा $remote_user आहे. HTTP basic authentication वापरात असल्यासच त्यात मूल्य भरले जाते.
  • "GET /pricing HTTP/1.1" म्हणजे $request. ही संपूर्ण मूळ request line आहे. nginx च्या default log escaping नुसार double quote, backslash आणि 32 पेक्षा कमी किंवा 126 पेक्षा जास्त कोणताही byte \xXX म्हणून लिहिला जातो. त्यामुळे line अचूक राहते, पण ती नेहमी byte-for-byte समान असेलच असे नाही.
  • 200 म्हणजे तुमच्या server ने परत केलेला status. Visitor ला दिसलेला status यात अभिप्रेत नाही.
  • 5310 म्हणजे $body_bytes_sent. यात फक्त body समाविष्ट असते. Response headers मोजले जात नाहीत. त्यामुळे प्रत्यक्ष पाठवलेल्या bytes पेक्षा ही संख्या नेहमी कमी असते.
  • शेवटची दोन quoted fields Referer आणि User-Agent आहेत. दोन्ही client कडून येतात. त्यामुळे दोन्हींमध्ये कोणतेही मूल्य असू शकते.

Junk देखील escaped form मध्ये log केला जातो. Plaintext port 80 वर TLS (transport layer security) वापरणारा client जोडल्यास 400 line तयार होते. तिच्या request field ची सुरुवात "\x16\x03\x01\x02\x00\x01" सारख्या escaped bytes ने होते. \x16 हा TLS handshake record type आहे. त्यामुळे ते bytes ClientHello ची सुरुवात आहेत, request line ची नाहीत. तुमचा server योग्य प्रकारे काम करत आहे. काहीतरी HTTPS विनंत्या HTTP port कडे पाठवत आहे.

तुमच्या log format मध्ये $server_protocol देखील जोडा. ते HTTP/1.1, HTTP/2.0 किंवा HTTP/3.0 दर्शवते. Protocol change प्रत्यक्ष लागू झाला आहे हे सिद्ध करण्याचा हा सर्वात जलद मार्ग आहे.

तुमची साइट हे status codes परत करते तेव्हा त्यांचा अर्थ

पहिला अंक code ची श्रेणी दर्शवतो. सर्वप्रथम ही श्रेणी पाहा.

2xx म्हणजे विनंती यशस्वी झाली. सामान्य read साठी 200 OK वापरला जातो. काहीतरी तयार करणाऱ्या POST नंतर 201 Created वापरला जातो. परत पाठवण्यासाठी काहीही नसताना यश दर्शवण्यासाठी 204 No Content वापरला जातो. DELETE ला हेच नेहमीचे उत्तर असते.

3xx म्हणजे दुसरीकडे पाहा. 301 कायमस्वरूपी असतो आणि browsers तो ठामपणे cache करतात. काही वेळा वापरकर्ता त्याचे profile साफ करेपर्यंत तो cache राहतो. त्यामुळे चुकीच्या hostname कडे निर्देश करणारा 301 मागे घेणे त्रासदायक ठरते. Redirect ची अजून चाचणी सुरू असताना 302 वापरा. 304 Not Modified हे error नसून यशस्वी प्रतिसाद आहे. Client ने conditional request पाठवली होती. त्यात तुम्हाला अजून ओळखता येणारा ETag (entity tag) असलेला If-None-Match किंवा resource ज्या तारखेपासून बदललेला नाही ती तारीख असलेला If-Modified-Since असतो. त्यामुळे तुम्ही headers पाठवता, पण body पाठवत नाही. Log मध्ये 304s मोठ्या प्रमाणात दिसत असतील, तर caching कार्यरत आहे.

4xx म्हणजे request चुकीची होती. 400 Bad Request म्हणजे input चे स्वरूप चुकीचे आहे. 401 Unauthorized चा खरा अर्थ unauthenticated असा आहे. त्यामध्ये scheme चे नाव देणारा WWW-Authenticate header असणे आवश्यक आहे. 403 Forbidden म्हणजे server ने request समजून घेतली, पण तरीही ती नाकारली. 404 Not Found म्हणजे अस्तित्वात नसलेला path किंवा server अस्तित्व मान्य करू इच्छित नसलेला path. काही applications access नसलेल्या clients पासून resource लपवण्यासाठी 403 ऐवजी 404 परत करतात. 405 Method Not Allowed म्हणजे path बरोबर आहे, पण method चुकीची आहे. Static file location वर केलेला POST याचे उदाहरण आहे. 413 म्हणजे nginx च्या client_max_body_size पेक्षा मोठा body. याची default मर्यादा 1 megabyte आहे. Error log मध्ये client intended to send too large body याची पुष्टी करतो.

Static file साठी आलेला 403 बहुतेक वेळा HTTP rule मुळे नसतो. Configuration बदलण्यापूर्वी /var/log/nginx/error.log वाचा. open() "/srv/site/index.html" failed (13: Permission denied) म्हणजे nginx worker user फाइल वाचू शकत नाही. याचे सर्वात सामान्य कारण म्हणजे parent directory वर others साठी execute permission नसणे. directory index of "/srv/site/" is forbidden म्हणजे path अशा directory कडे resolve झाला आहे जिथे index file नाही आणि autoindex बंद आहे.

5xx म्हणजे तुमच्या बाजूने त्रुटी झाली. 500 हा सर्वसाधारण server error आहे. तुमच्या स्वतःच्या साइटवर तो सहसा application मधील unhandled error दर्शवतो. 502 Bad Gateway म्हणजे nginx ला upstream कडून वापरता येईल असा response मिळाला नाही. Error log कारण सांगतो: connect() failed (111: Connection refused) while connecting to upstream म्हणजे proxy_pass मधील address वर काहीही listening नाही. 504 Gateway Timeout म्हणजे nginx ने upstream ची वाट पाहणे थांबवले. सामान्य परिस्थितीत upstream ने connection स्वीकारलेले असते, पण default 60 seconds असलेल्या proxy_read_timeout कालावधीत काहीही response दिलेला नसतो. Log मध्ये याची नोंद upstream timed out (110: Connection timed out) while reading response header from upstream म्हणून होते. Connection attempt proxy_connect_timeout मध्ये पूर्ण न झाल्यास, जो default ने 60 seconds असतो, तोही 504 मध्ये संपतो. त्या वेळी log line चा शेवट while connecting to upstream ने होतो. 503 Service Unavailable म्हणजे server सध्या request हाताळू शकत नाही. याचे सामान्य कारण म्हणजे server वर जास्त load असणे किंवा नियोजित maintenance साठी तो बंद असणे. nginx चा स्वतःचा rate limiter 503 परत करतो, कारण limit_req_status चे default मूल्य 503 आहे. तुम्ही log मध्ये 429 Too Many Requests शोधत असाल आणि त्याऐवजी 503 सापडत असेल, तर त्याचे कारण हेच आहे. अचूक code मिळवण्यासाठी limit_req_status 429; सेट करा.

सर्व्हर चालवताना महत्त्वाचे असलेले headers

Host साइट निवडतो. एका IP address वर शेकडो hostnames सेवा देऊ शकतात. nginx कोणता server block प्रतिसाद देईल हे ठरवण्यासाठी Host ची server_name शी जुळवणी करतो. काहीही जुळले नाही, तर nginx default server वापरतो. दुसरा server default_server म्हणून चिन्हांकित केलेला नसल्यास, तो address आणि port वर ऐकणारा पहिला block असतो. नवीन virtual host कडून चुकीची साइट मिळण्याचे कारण जवळजवळ नेहमी हेच असते: नाव जुळले नाही आणि request default कडे गेली. DNS मध्ये बदल न करता त्याची चाचणी करा:

curl -sS -o /dev/null -D - -H 'Host: app.example.com' http://127.0.0.1/

User-Agent हे client ने लिहिलेले स्वतःचे वर्णन असते आणि तो मुक्त मजकूर असतो. Logs वाचताना त्याचा संकेत म्हणून वापर करा. त्याचा नियंत्रणासाठी कधीही वापर करू नका. खोटे वर्णन द्यायचे असल्यास client ते सहज करू शकतो. त्यामुळे User-Agent द्वारे scraper block केल्यास फक्त नियम पाळणारे scraper filter होतात.

Content-Type bytes चा अर्थ कसा लावायचा हे ठरवतो: API request साठी application/json आणि page साठी text/html; charset=utf-8. nginx /etc/nginx/mime.types वापरून file extensions चे types शी mapping करतो. Packaged nginx.conf default_type application/octet-stream; सेट करते. त्यामुळे nginx ला माहीत नसलेल्या extension असलेली file render होण्याऐवजी download म्हणून दिली जाते. याचे दृश्यमान लक्षण म्हणजे styling शिवाय page load होतो आणि browser console मध्ये Refused to apply style from ... because its MIME type ('text/plain') is not a supported stylesheet MIME type दिसते. येथे MIME म्हणजे multipurpose internet mail extensions. या type strings ज्या naming scheme मधून येतात, त्याचे हे नाव आहे.

Cache-Control हे तुमच्या server आणि reader यांच्यामधील प्रत्येक cache नियंत्रित करण्याचे साधन आहे. ज्यांच्या filename मध्ये content hash असतो अशा assets साठी public, max-age=31536000, immutable योग्य आहे, कारण content बदलल्यावर नाव बदलते. User-specific कोणत्याही गोष्टीवर no-store लावा. Logged-in page ठेवणारा shared cache तीच page त्याच URL साठी पुढे request करणाऱ्या व्यक्तीला देऊ शकतो. private ही मधली setting आहे: browser ती ठेवू शकतो, पण shared cache ठेवू शकत नाही.

X-Forwarded-For आवश्यक आहे, कारण proxy visitor चा address लपवतो. Request reverse proxy मधून गेल्यावर $remote_addr हा proxy चा address असतो. त्यामुळे मूळ address पुनर्स्थापित करेपर्यंत तुमचे logs, geolocation आणि rate limiting सर्वांना एकच client दिसतो. Proxy ने मूळ address पुढे पाठवला पाहिजे:

proxy_set_header Host $host;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;

त्यानंतर receiving server ला त्या address वर विश्वास ठेवण्यास सांगावे लागते. नेमक्या कोणत्या proxy वर विश्वास ठेवायचा हेही सांगावे लागते:

set_real_ip_from 10.0.0.0/8;
real_ip_header X-Forwarded-For;

हे दोन्ही directives nginx च्या realip module शी संबंधित आहेत. हा module $remote_addr च्या जागी forwarded address ठेवतो आणि connection चा स्वतःचा address $realip_remote_addr मध्ये ठेवतो. nginx स्वतः compile करत असल्यास --with-http_realip_module जोडा, कारण हा module default स्वरूपात build केलेला नसतो.

तुमच्या नियंत्रणाखाली असलेल्या ranges चीच यादी द्या. X-Forwarded-For हा कोणताही client पाठवू शकणारा साधा मजकूर आहे. त्यामुळे set_real_ip_from 0.0.0.0/0; मुळे visitor तुम्ही log करणार address आणि rate limiter मध्ये मोजला जाणारा address निवडू शकतो.

X-Forwarded-Proto एका विशिष्ट आणि अतिशय सामान्य अपयशाला प्रतिबंध करते. तुमचा proxy TLS terminate करून request plain HTTP वर application कडे पाठवतो. Application ला plain request दिसते, त्यामुळे visitor ने HTTPS वापरावे असे ठरवून 301 https://example.com/ प्रतिसाद देते. Browser त्याचे अनुसरण करतो, proxy पुन्हा TLS terminate करून plain HTTP पाठवतो आणि ही प्रक्रिया पुन्हा सुरू होते. शेवटी browser ERR_TOO_MANY_REDIRECTS सह थांबतो. X-Forwarded-Proto: https पाठवल्यास application ला visitor आधीच HTTPS वर असल्याचे कळते आणि ते redirect करणे थांबवते.

HTTP/1.1 विरुद्ध HTTP/2 विरुद्ध HTTP/3: तुमच्यासाठी काय बदलते

HTTP/1.1 मजकूराधारित आहे आणि प्रत्यक्ष वापरात प्रत्येक connection वर एका वेळी एकच request हाताळते. Connection: keep-alive मुळे पुढील request त्याच TCP connection चा पुनर्वापर करू शकते आणि setup ची किंमत वाचते; मात्र responses ज्या क्रमाने requests पाठवल्या गेल्या त्याच क्रमाने परत येतात. Protocol मध्ये pipelining चीही परवानगी आहे. यात client उत्तरे येण्याची वाट न पाहता अनेक requests पाठवतो. तरीही क्रमाचा नियम लागू राहतो आणि कोणताही आधुनिक browser pipelining default ने सुरू करत नाही. एखादा response उशिरा आल्यास त्यामागे रांगेत असलेले सर्वकाही थांबते. याला head-of-line blocking म्हणतात. Browsers त्यावर उपाय म्हणून त्याच hostname शी एकाच वेळी अनेक connections उघडतात.

HTTP/2 मध्ये तेच methods आणि तेच status codes राहतात, परंतु framing binary होते. स्वतंत्र streams म्हणून अनेक requests एकाच connection वर share होतात. वारंवार येणारा header मजकूर compress केला जातो. आधुनिक request मध्ये header मजकूर मोठ्या प्रमाणात असल्यामुळे हे महत्त्वाचे आहे. Connection अजूनही TCP असते. त्यामुळे एखादा packet हरवल्यास retransmission येईपर्यंत त्या connection वरील प्रत्येक stream थांबतो. Head-of-line blocking नाहीसे झालेले नाही. ते HTTP स्तरावरून transport स्तरावर गेले आहे. Server push हा HTTP/2 चा भाग होता; परंतु Chrome ने 2022 मध्ये त्याचे support काढून टाकल्यामुळे प्रत्यक्ष वापरात ते आता उपलब्ध नाही.

HTTP/3 मध्ये पुन्हा तेच semantics राहतात आणि TCP ऐवजी QUIC वापरले जाते. QUIC हा UDP (user datagram protocol) वर आधारित transport आहे. QUIC streams खालच्या स्तरापर्यंत स्वतंत्र असतात. त्यामुळे packet हरवल्यास फक्त तो packet ज्या stream चा भाग होता तीच stream थांबते. TLS 1.3 हे QUIC handshake मध्येच समाविष्ट असते; त्यावर स्वतंत्र स्तर म्हणून जोडलेले नसते. त्यामुळे नवीन connection साठी कमी round trips लागतात. याचे दोन व्यावहारिक परिणाम आहेत. HTTP/3 साठी server वापरत असलेला UDP port मार्गातील प्रत्येक firewall मध्ये open असणे आवश्यक आहे. तसेच UDP वर rate limit करणारे किंवा UDP block करणारे कोणतेही network clientsना HTTP/2 कडे परत पाठवेल. हा port सामान्यतः 443 असतो. मात्र protocol मुळे server कोणताही UDP port वापरू शकतो, कारण browsersना HTTP/3 कडे निर्देश करणाऱ्या advertisement मध्ये port स्पष्टपणे दिलेला असतो.

तुमच्यासाठी प्रत्यक्षात काय बदलते. Browsers सामान्यतः HTTP/3 पासून सुरुवात करत नाहीत. ते HTTP/2 किंवा HTTP/1.1 द्वारे connect होतात, response मधील Alt-Svc: h3=":443"; ma=86400 header पाहतात आणि त्या host शी पुढील connections साठी HTTP/3 वापरतात. याला अपवाद म्हणजे DNS मधील HTTPS record. त्याच्या alpn value मध्ये h3 दिलेले असल्यास Firefox सारखा browser पहिल्याच connection वर HTTP/3 उघडू शकतो. हा record अतिरिक्त hint आहे, replacement नाही. त्यामुळे header हा ऐच्छिक सजावटीचा भाग नाही. तो मुख्य discovery mechanism आहे. nginx मध्ये version 1.25.1 पासून HTTP/2 साठी स्वतंत्र directive आली (server block मधील http2 on;, जुन्या listen ... http2 parameter ची जागा घेणारी). QUIC mainline 1.25.0 मध्ये आले. तेथे HTTP/3 site साठी नेहमीच्या listen 443 ssl; सोबत listen 443 quic reuseport; आवश्यक आहे. HTTP/3 module default ने build केलेले नसते (--with-http_v3_module), आणि nginx चे documentation अजूनही त्याच्या support ला experimental म्हणते.

या बाबतीत proxies ची maturity वेगवेगळी आहे. त्यामुळे तुम्ही प्रत्यक्ष चालवत असलेल्या version नुसार हे तपासणे आवश्यक आहे. November 2026 पर्यंत Caddy कोणत्याही configuration शिवाय default ने HTTP/3 serve करते. nginx साठी वर वर्णन केलेला स्पष्ट quic listener आणि Alt-Svc header आवश्यक आहे. Traefik मध्ये प्रत्येक entry point साठी स्पष्ट http3 option द्वारे ते enable करता येते. तुम्ही अनेक Docker apps च्या पुढे Traefik ठेवून TLS terminate करत असल्यास, visitorsना मिळणारी protocol version तेथे ठरते. Browser ने कोणतेही protocol negotiate केले असले तरी proxy पासून तुमच्या container पर्यंतचा hop सामान्यतः plain HTTP/1.1 असतो.

गृहीत धरण्याऐवजी पडताळणी करा. curl --http3 -sS -o /dev/null -D - https://example.com/ फक्त curl -V मध्ये features पैकी HTTP3 दिलेले असल्यास कार्य करते. बहुतेक distribution builds मध्ये ते समाविष्ट नसते. विश्वासार्ह तपासणी म्हणजे तुमचा स्वतःचा log. Format मध्ये $server_protocol जोडा आणि प्रत्यक्ष browsers कोणते protocol negotiate करतात ते वाचा. हे करण्यापूर्वी quic listener वापरत असलेला UDP port, वरील configuration मध्ये 443, प्रत्यक्षात open आहे याची खात्री करा. फक्त TCP 443 ला परवानगी देणाऱ्या firewall मुळे HTTP/3 शांतपणे अपयशी होईल आणि site HTTP/2 वर कार्यरत राहील. तुमच्या Linux server वर कोणते ports open असून listening अवस्थेत आहेत हे जाणून घेणे ही पहिली तपासणी आहे: तुमच्या Linux server वर कोणते ports open असून listening अवस्थेत आहेत.

HTTPS: HTTP हा प्रोटोकॉल आहे, TLS हे त्याचे आवरण आहे

HTTPS हा स्वतंत्र प्रोटोकॉल नाही. TLS सत्राच्या आत पाठविलेल्या त्याच विनंत्या आणि त्याच status codes म्हणजे HTTPS. Port 80 वर या विनंत्या स्पष्ट स्वरूपात वाहतात, तर port 443 वर त्या encrypted स्वरूपात वाहतात. आधी TLS handshake पूर्ण होतो. त्यानंतर HTTP request encrypted channel मधून जाते. याच क्रमामुळे certificate problem ला status code जोडलेला नसतो. एकही HTTP byte पाठवण्यापूर्वीच failure होते. त्यामुळे क्रमांक देण्यासाठी response उपलब्ध नसतो.

एका server वर अनेक sites host केल्या असतील, तर क्रमातील एक तपशील महत्त्वाचा ठरतो. Certificate निवडण्यासाठी SNI (server name indication) वापरले जाते. हा TLS handshake मधील field आहे. कोणताही HTTP header अस्तित्वात येण्यापूर्वी hostname या field मध्ये स्पष्ट स्वरूपात पाठवला जातो. त्यामुळे server प्रथम SNI वरून certificate निवडतो. त्यानंतर Host header वरून virtual host निवडतो. हे दोन स्वतंत्र lookups आहेत आणि सामान्यतः त्यांचे परिणाम जुळतात. ते जुळले नाहीत, तर browser NET::ERR_CERT_COMMON_NAME_INVALID सारखा name mismatch दाखवतो आणि कोणतीही request पाठवत नाही. याचे कारण असे की तुमच्या default server चे certificate ज्या नावासाठी दिले गेले, ते नाव त्या certificate मध्ये समाविष्ट नसते.

Public site साठी वास्तविक certificate मिळवा आणि त्याचे renewal आपोआप होऊ द्या. nginx वर Let's Encrypt सह Certbot तुमच्या server block मध्ये certificate paths लिहिते आणि renewal timer तुमच्यासाठी install करते. Public authority validate करू शकत नाही अशा hostname साठी, उदाहरणार्थ internal name किंवा तुमच्या स्वतःच्या network वरील bare IP address साठी, Ubuntu वर self-signed certificate हा योग्य पर्याय आहे. मात्र प्रत्येक client ला ते certificate trust करण्यास सांगावे लागेल, हे मान्य असणे आवश्यक आहे.

TLS कार्यरत झाल्यावर port 80 वरील सर्व traffic port 443 कडे पाठवा:

server {
    listen 80;
    server_name example.com;
    return 301 https://$host$request_uri;
}

तुम्हाला खात्री असेल तेव्हाच Strict-Transport-Security जोडा. add_header Strict-Transport-Security "max-age=63072000; includeSubDomains" always; header browsers ना त्या hostname साठी दोन वर्षे plain HTTP नाकारण्यास सांगतो. Browsers ही सूचना त्यांच्या स्वतःच्या cache मधून लागू करतात. त्यामुळे नंतर header काढून टाकल्याने हा परिणाम पूर्ववत होत नाही. सुरुवातीला काही तासांचा max-age ठेवा. प्रत्येक subdomain खरोखर HTTPS वर आहे याची खात्री करा. त्यानंतर कालावधी वाढवा.

FAQ

HTTP आणि HTTPS मध्ये काय फरक आहे?

HTTPS म्हणजे TLS (transport layer security) सत्रामधून पाठवले जाणारे HTTP. Methods आणि status codes एकसारखेच असतात. फरक एवढाच की client आणि TLS समाप्त करणाऱ्या घटकादरम्यानचे bytes encrypted असतात आणि default port 80 वरून 443 होतो. पहिला HTTP byte पाठवण्यापूर्वी TLS handshake पूर्ण होत असल्यामुळे certificate failure मुळे कधीही status code तयार होत नाही. म्हणून browser मधील certificate warning मध्ये 403 सारखा क्रमांक न दिसता NET::ERR_CERT_COMMON_NAME_INVALID सारखे error name दिसते.

माझी site 502 Bad Gateway का परत करते?

nginx कडून मिळणारा 502 म्हणजे nginx ज्या upstream कडे proxy करत आहे त्याच्याकडून वापरण्यायोग्य response मिळू शकला नाही. त्यामुळे visitor ची request योग्य होती, परंतु nginx च्या मागील बाजूस काहीतरी चुकीचे होते. /var/log/nginx/error.log वाचा. connect() failed (111: Connection refused) while connecting to upstream म्हणजे proxy_pass मधील address आणि port वर काहीही listening करत नाही. त्यामुळे application चालू आहे आणि अपेक्षित ठिकाणी bind झाले आहे का ते तपासा. no live upstreams while connecting to upstream म्हणजे वारंवार झालेल्या failures नंतर upstream block मधील प्रत्येक server down म्हणून चिन्हांकित झाला आहे. 504 Gateway Timeout शी तुलना करा. त्याचा अर्थ nginx upstream कडून response ची वाट पाहताना timeout झाला. Connection proxy_connect_timeout मध्ये पूर्ण होण्यासाठी किंवा response proxy_read_timeout मध्ये मिळण्यासाठी लागणाऱ्या वेळेत तो पूर्ण झाला नाही.

माझ्या access log मध्ये प्रत्येक visitor साठी तोच IP address का दिसतो?

कारण $remote_addr TCP connection उघडणाऱ्या घटकाचा address नोंदवतो. Reverse proxy किंवा content delivery network मागे असल्यास हा address proxy चा असतो. Visitor चा address त्याऐवजी X-Forwarded-For header मध्ये येतो. Proxy वर proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; सेट करा. त्यानंतर receiving nginx वर set_real_ip_from ला proxy च्या address range वर सेट करा आणि real_ip_header X-Forwarded-For; सेट करा. तुम्ही नियंत्रित करत असलेल्या rangesच सूचीबद्ध करा. हा header कोणताही client पाठवू शकतो. त्यामुळे संपूर्ण internet वरून त्यावर trust ठेवल्यास visitor ला log मध्ये नोंदवला जाणारा आणि rate limit साठी वापरला जाणारा address स्वतः निवडता येतो.

मला HTTP/2 किंवा HTTP/3 सुरू करण्याची गरज आहे का?

आधीच TLS असलेल्या site वर HTTP/2 सुरू करणे उपयुक्त आहे. त्यासाठी एक directive पुरते आणि अनेक लहान files असलेल्या page ला slow करणारी प्रत्येक connection वरील request limit दूर होते. HTTP/3 चा फायदा तुलनेने कमी आणि कमी निश्चित आहे. त्यासाठी सामान्यतः 443 असलेला open UDP port आणि QUIC support असलेला proxy build आवश्यक असतो. Browsers सामान्यतः आधीच्या response मधील Alt-Svc header किंवा h3 सूचीबद्ध करणारा HTTPS DNS record पाहिल्यानंतरच HTTP/3 वर switch करतात हे लक्षात ठेवा. त्यामुळे यापैकी एकही गोष्ट नसल्यास तुमच्या listen line मध्ये काहीही असले तरी परिणाम बदलत नाही. $server_protocol तुमच्या log format मध्ये जोडा आणि त्यावर वेळ खर्च करण्यापूर्वी visitors प्रत्यक्षात कोणता protocol negotiate करतात ते मोजा.

File अस्तित्वात असताना 403 Forbidden चा अर्थ काय?

Static site वर 403 म्हणजे सामान्यतः HTTP rule नसून filesystem permission ची समस्या असते. /var/log/nginx/error.log मधील open() ... failed (13: Permission denied) याचा अर्थ nginx worker user file read करू शकत नाही. बहुतेक वेळा file mode चुकीचा असल्यामुळे नव्हे, तर parent directory ला others साठी execute permission नसल्यामुळे असे होते. directory index of ... is forbidden म्हणजे request अशा directory कडे resolve झाली ज्यात index file नाही आणि autoindex बंद आहे. जुळणाऱ्या location block मधील स्पष्ट deny rule देखील 403 परत करते. Error log मध्ये काहीही दिसत नसल्यास तो block तपासा.

हा लेख उपयुक्त होता का?

#http#https#web-server#headers#http3