Progetto

Generale

Profilo

DjangoClusterNginx » Cronologia » Versione 5

Mark Caglienzi, 16-12-2013 16:32
Aggiunta parte sulla gestione della session in caso il db backend non sia usabile (database non condiviso)

1 1 Mark Caglienzi
h1. Clusterizzare un'applicazione Django con Nginx
2
3
Si suppone di avere un'applicazione django da distribuire su più istanze server, e di volere che il carico sia distribuito fra queste istanze e che anche in caso di malfunzionamento di una o più istanze, il servizio non sia negato, finché almeno un server resta funzionante.
4
5
h2. Prerequisiti
6
7
* Applicazione Django nella directory @/home/utente/projects/django/myproject/@ (per semplicità la guida assume che l'applicazione sia servita da @./manage.py runserver $PORTA@)
8
* Nginx
9
10
h2. Avvio delle istanze Django
11
12 5 Mark Caglienzi
Innanzitutto assicurarsi che la @SECRET_KEY@ contenuta nei rispettivi file @settings.py@ sia la stessa per tutte le istanze, in modo che i backend di firma digitale e di controllo interni a django funzionino correttamente.
13
14 1 Mark Caglienzi
Avviare 4 istanze della stessa applicazione in 4 terminali differenti (un comando per terminale):
15
16
<pre>
17
$ ./manage.py runserver 8000
18
$ ./manage.py runserver 8001
19
$ ./manage.py runserver 8002
20
$ ./manage.py runserver 8003
21
</pre>
22
23
In questo modo si avranno 4 istanze della stessa applicazione, e accedendo con il browser agli indirizzi @127.0.0.1:8000@, @127.0.0.1:8001@, @127.0.0.1:8002@, @127.0.0.1:8003@, si vedrà che ognuna funziona indipendentemente.
24
25 5 Mark Caglienzi
Oppure, in alternativa, usare Supervisor: [[SupervisorPerDjango|guida a questo link]].
26 4 Mark Caglienzi
27 1 Mark Caglienzi
h2. Configurazione base di nginx
28
29
Si crei il file di configurazione @/etc/nginx/sites-available/cluster@:
30
31
<pre>
32
upstream backend {
33
    server 127.0.0.1:8000;
34
    server 127.0.0.1:8001;
35
    server 127.0.0.1:8002;
36
    server 127.0.0.1:8003;
37
}
38
39
server {
40
    listen 80;
41
    root /home/utente/projects/django/;
42
    server_name cluster;
43
    access_log /home/utente/projects/django/access.log;
44
    error_log /home/utente/projects/django/error.log;
45
    location / {
46
        proxy_pass http://backend;
47
    }
48
}
49
</pre>
50
51
e si attivi con:
52
53
<pre>
54
# ln -s /etc/nginx/sites-available/cluster /etc/nginx/sites-enabled/cluster
55
# /etc/init.d/nginx restart
56
</pre>
57
58
In questo modo si dice a nginx di redirigere tutte le richieste che giungono a @http://cluster/@ verso il cluster chiamato @backend@, che è il gruppo di istanze di django.
59
60 3 Mark Caglienzi
Perché l'URL @http://cluster@ funzioni però, bisogna aggiungere una riga al file @/etc/hosts@ (o configurare il DNS in modo appropriato):
61 1 Mark Caglienzi
62
<pre>
63
127.0.0.1 cluster
64
</pre>
65 5 Mark Caglienzi
66
h2. Gestione della session
67
68
Nel caso dell'esempio, con tutte le istanze in locale e col database condiviso, la sessione di login funziona in modo trasparente dato che django usa la session con database backend. In produzione invece si vorranno cluster formati da più server, e il database potrebbe essere condiviso oppure no, a seconda dell'applicazione specifica. Django mette a disposizione diverse alternative per la gestione della session, ad esempio:
69
70
* File ("documentazione":https://docs.djangoproject.com/en/dev/topics/http/sessions/#using-file-based-sessions)
71
* Cookie firmati ("documentazione":https://docs.djangoproject.com/en/dev/topics/http/sessions/#using-cookie-based-sessions)
72
73
h3. Session backend basato su file
74
75
Per impostare il file backend bisogna avere una directory raggiungibile e scrivibile da tutti i server che partecipano al cluster, e configurare django in modo che usi quella directory per scrivere i file che contengono i dati di sessione. Come al solito nell'esempio si userà una directory locale, per semplicità, ma in produzione potrebbe essere ad esempio un path remoto montato tramite @sshfs@. Aggiungere quindi queste due righe al file @settings.py@:
76
77
<pre><code class="python">
78
SESSION_ENGINE = "django.contrib.sessions.backends.file"
79
SESSION_FILE_PATH = "/home/utente/projects/sessions/"
80
</code></pre>
81
82
h3. Session backend basato su cookie firmati
83
84
Django può anche usare cookie per i dati di sessione, firmati usando @SECRET_KEY@ come chiave (che dovrà essere la stessa per tutte le istanze) per evitare che l'utente che accede al sito possa modificarli. In questo modo qualsiasi sia il server che risponde alla singola request, django potrà controllare mediante il cookie firmato se l'utente è loggato oppure no, e tutti gli altri dati di sessione che l'applicazione avrà settato nell'oggetto @request.session@. Il file @settings.py@ dovrà contenere questa riga:
85
86
<pre><code class="python">
87
SESSION_ENGINE = "django.contrib.sessions.backends.signed_cookies"
88
</code></pre>
89 1 Mark Caglienzi
90 2 Mark Caglienzi
h2. Test
91 1 Mark Caglienzi
92
A questo punto si può accedere a @http://cluster/@ e vedere come le richieste vengano divise fra i 4 server, e fermandone alcuni e/o riavviandoli, il sito funziona sempre, a patto che ovviamente almeno un'istanza sia attiva.
93 2 Mark Caglienzi
94
Con questa configurazione di base il carico viene distribuito uniformemente fra i componenti del cluster, ma il modulo @upstream@ di nginx supporta diverse opzioni ("documentazione":http://nginx.org/en/docs/http/ngx_http_upstream_module.html), ad esempio @weight@:
95
<pre>
96
upstream backend {
97
    server 127.0.0.1:8000;
98
    server 127.0.0.1:8001;
99
    server 127.0.0.1:8002 weight=3;
100
    server 127.0.0.1:8003;
101
}
102
</pre>
103
104
in questo modo nginx redirigerà sul terzo server statisticamente il triplo delle richieste rispetto agli altri (può essere utile se uno dei server del cluster ha performance hardware maggiori, o se ha più banda a disposizione), oppure @max_fails@ e @fail_timeout@:
105
<pre>
106
upstream backend {
107
    server 127.0.0.1:8000;
108
    server 127.0.0.1:8001 max_fails=2 fail_timeout=20s;
109
    server 127.0.0.1:8002;
110
    server 127.0.0.1:8003;
111
}
112
</pre>
113
114
se nginx vedrà negate più di 2 richieste in 20 secondi dal secondo server, lo considererà non disponibile per 20 secondi (i default sono @max_fails=1@ e @fail_timeout=10s@)
115
116
<pre>
117
upstream backend {
118
    server 127.0.0.1:8000 backup;
119
    server 127.0.0.1:8001;
120
    server 127.0.0.1:8002;
121
    server 127.0.0.1:8003;
122
}
123
</pre>
124
125
in questo modo il primo server è considerato di backup, e quindi verrà usato solo quando nessun altro server è disponibile.