Les tests unitaires¶
Django est livré avec sa propre suite de tests, dans le répertoire tests
de la base de code. Notre politique est de nous assurer que tous les tests passent en tout temps.
Nous apprécions toute contribution à la suite de tests !
Les tests de Django utilisent tous l’infrastructure de tests livrée avec Django pour tester les applications. Consultez Écriture et lancement de tests pour une explication sur la façon d’écrire de nouveaux tests.
Lancement des tests unitaires¶
Démarrage rapide¶
Tout d’abord, créez votre fork de Django sur GitHub.
Ensuite, créez et activez un environnement virtuel. Si vous n’êtes pas familier avec cette procédure, lisez le tutoriel de contribution.
Puis, créez un clone local de votre fork, installez quelques dépendances et lancez la suite de tests :
$ git clone https://github.com/YourGitHubName/django.git django-repo
$ cd django-repo/tests
$ python -m pip install -e ..
$ python -m pip install -r requirements/py3.txt
$ ./runtests.py
...\> git clone https://github.com/YourGitHubName/django.git django-repo
...\> cd django-repo\tests
...\> py -m pip install -e ..
...\> py -m pip install -r requirements\py3.txt
...\> runtests.py
L’installation des dépendances nécessite probablement l’installation de paquets de votre système d’exploitation. Il est généralement possible de savoir quels paquets installer en faisant une recherche Web à propos des dernières lignes du message d’erreur. Essayez d’ajouter le nom de votre système d’exploitation à la requête si nécessaire.
Si vous avez des soucis d’installation des dépendances, vous pouvez omettre cette étape. Voir Lancement de tous les tests pour des détails sur l’installation des dépendances facultatives des tests. Si l’une des dépendances facultatives n’est pas installée, les tests qui l’exigent seront passés (skipped).
Le lancement des tests exige un module de réglages Django définissant la base de données à utiliser. Pour faciliter le démarrage, Django fournit et utilise un module de réglages d’exemple utilisant la base de données SQLite. Voir Utilisation d’un autre module de réglages settings pour apprendre comment utiliser un module de réglages différent pour lancer les tests avec une autre base de données.
Des problèmes ? Voir Dépannage pour certaines problématiques courantes.
Lancement des tests avec tox
¶
Tox est un outil pour exécuter des tests dans différents environnement virtuels. Django contient un fichier tox.ini
basique qui automatise certains contrôles que notre serveur de construction effectue pour les requêtes de contribution. Pour exécuter les tests unitaires et autres contrôles (tels que l’ordre des importations, la correction orthographique de la documentation et la mise en forme du code), installez et lancez la commande tox
depuis n’importe quel endroit de l’arborescence source de Django :
$ python -m pip install tox
$ tox
...\> py -m pip install tox
...\> tox
Par défaut, tox
lance la suite de tests avec le fichier de réglages inclus pour SQLite, black
, blacken-docs
, flake8
, isort
et la correction orthographique de la documentation. En plus des dépendances système mentionnées ailleurs dans cette documentation, la commande python3
doit se trouver dans votre chemin et être liée à la version appropriée de Python. Une liste des environnements par défaut peut être listée comme suit :
$ tox -l
py3
black
blacken-docs
flake8>=3.7.0
docs
isort>=5.1.0
...\> tox -l
py3
black
blacken-docs
flake8>=3.7.0
docs
isort>=5.1.0
Test avec d’autres versions de Python et de moteurs de base de données¶
En plus des environnements par défaut, tox
prend en charge le lancement des tests unitaires pour d’autres versions de Python et de moteurs de base de données. Comme la suite de tests de Django ne livre pas de fichier de réglages pour les bases de données autres que SQLite, vous devez donc créer et fournir vos propres réglages de tests. Par exemple, pour lancer les tests avec Python 3.10 en utilisant PostgreSQL :
$ tox -e py310-postgres -- --settings=my_postgres_settings
...\> tox -e py310-postgres -- --settings=my_postgres_settings
Cette commande configure un environnement virtuel Python 3.10, installe les dépendances de la suite de tests de Django (y compris celles pour PostgreSQL) et appelle runtests.py
avec les paramètres fournis (dans ce cas, --settings=my_postgres_settings
).
Le reste de cette documentation montre des commandes pour lancer les tests sans tox
. Cependant, toute option transmise à runtests.py
peut également être transmise à tox
en préfixant la liste des paramètres par --
, comme ci-dessus.
Tox
respecte également la variable d’environnement DJANGO_SETTINGS_MODULE
quand elle est définie. Par exemple, la commande ci-dessous est équivalente à la précédente :
$ DJANGO_SETTINGS_MODULE=my_postgres_settings tox -e py310-postgres
Les utilisateurs de Windows devraient écrire :
...\> set DJANGO_SETTINGS_MODULE=my_postgres_settings
...\> tox -e py310-postgres
Lancement des tests JavaScript¶
Django contient un ensemble de tests unitaires JavaScript ciblant des fonctions de certaines applications contrib. Les tests JavaScript ne sont pas lancés par défaut avec tox
car ils ont besoin que Node.js
soit installé et ne sont pas nécessaires pour la majorité des correctifs. Pour lancer les tests JavaScript en utilisant tox
:
$ tox -e javascript
...\> tox -e javascript
Cette commande exécute npm install
pour s’assurer que les logiciels exigés par les tests sont à jour, puis lance npm test
.
Lancement des tests avec django-docker-box
¶
django-docker-box permet de lancer la suite de tests de Django en combinant toutes les bases de données prises en charge et les versions de Python. Consultez la page du projet django-docker-box pour des instructions d’installation et d’utilisation.
Utilisation d’un autre module de réglages settings
¶
Le module de réglages inclus (tests/test_sqlite.py
) permet de lancer la suite de tests avec SQLite. Si vous souhaitez lancer les tests avec une autre base de données, vous devez définir votre propre fichier de réglages. Certains tests, comme ceux de contrib.postgres
, sont spécifique à un moteur de base de données spécifique et seront omis quand une autre base de données est utilisée. Certains tests sont omis ou leur échec est attendu avec certains moteurs de base de données (voir DatabaseFeatures.django_test_skips
et DatabaseFeatures.django_test_expected_failures
pour chaque moteur).
Pour lancer les tests avec des réglages différents, assurez-vous que le module se trouve dans le chemin PYTHONPATH
et indiquez ce module avec --settings
.
Le réglage DATABASES
dans tout module de réglages pour les tests doit définir deux bases de données :
- Une base de données
default
. Celle-ci doit utiliser le moteur que vous souhaitez tester de manière principale. - Une base de données avec l’alias
other
. Celle-ci est utilisée pour tester les requêtes qui sont dirigées vers d’autres bases de données. Elle devrait utiliser le même moteur que la base de donnéesdefault
, mais elle doit avoir un autre nom.
Si vous utilisez un moteur autre que SQLite, il est nécessaire de fournir d’autres détails pour chaque base de données :
- L’option
USER
doit indiquer un compte utilisateur existant pour la base de données. Cet utilisateur a besoin de la permission d’exécuterCREATE DATABASE
afin de pouvoir créer la base de données de test. - L’option
PASSWORD
doit indiquer le mot de passe à utiliser pour l’utilisateurUSER
.
Les noms des bases de données de test sont composés par le préfixe test_
devant les réglages NAME
des bases de données définies dans DATABASES
. Ces bases de données de test sont détruites lorsque les tests sont terminés.
Vous devez aussi vous assurer que votre base de données utilise UTF-8 comme jeu de caractères par défaut. Si votre serveur de base de données n’utilise pas le jeu de caractères UTF-8 par défaut, vous devrez inclure une valeur pour le réglage CHARSET
du dictionnaire des réglages de test pour la base de données concernée.
Lancement de tests spécifiques¶
La suite de tests complète de Django prend un certain temps à s’exécuter, et le lancement de tous les tests pourrait être superflu si par exemple vous avez juste ajouté un test à Django et que vous voulez le lancer rapidement sans tout le reste des tests. Il est possible de lancer un sous-ensemble des tests unitaires en ajoutant les noms des modules de test à runtests.py
dans la ligne de commande.
Par exemple, si vous souhaitez lancer les tests uniquement pour les relations génériques et la régionalisation, saisissez :
$ ./runtests.py --settings=path.to.settings generic_relations i18n
...\> runtests.py --settings=path.to.settings generic_relations i18n
Comment trouver les noms des tests individuels ? Regardez dans tests/
— chaque nom de répertoire est le nom d’un module de tests.
Si vous souhaitez lancer uniquement une classe précise de tests, vous pouvez indiquer une liste de chemins vers les classes de test concernées. Par exemple, pour lancer les tests TranslationTests
du module i18n
, saisissez :
$ ./runtests.py --settings=path.to.settings i18n.tests.TranslationTests
...\> runtests.py --settings=path.to.settings i18n.tests.TranslationTests
Pour aller encore plus loin, vous pouvez indiquer une méthode de test individuelle comme ceci :
$ ./runtests.py --settings=path.to.settings i18n.tests.TranslationTests.test_lazy_objects
...\> runtests.py --settings=path.to.settings i18n.tests.TranslationTests.test_lazy_objects
Vous pouvez lancer les tests en commençant par un module de premier niveau avec l’option --start-at
. Par exemple :
$ ./runtests.py --start-at=wsgi
...\> runtests.py --start-at=wsgi
Vous pouvez aussi lancer les tests en commençant après un module de premier niveau avec l’option --start-after
. Par exemple :
$ ./runtests.py --start-after=wsgi
...\> runtests.py --start-after=wsgi
Notez que l’option --reverse
n’a pas d’influence sur les options --start-at
et --start-after
. De plus, ces options ne peuvent pas être utilisées quand vous indiquez des noms de tests.
Lancement des tests Selenium¶
Certains tests requièrent Selenium et un navigateur Web. Pour lancer ces tests, vous devez installer le paquet selenium et lancer les tests avec l’option --selenium=<NAVIGATEURS>
. Par exemple, si Firefox et Google Chrome sont installés :
$ ./runtests.py --selenium=firefox,chrome
...\> runtests.py --selenium=firefox,chrome
Consultez le paquet selenium.webdriver pour obtenir la liste des navigateurs disponibles.
L’indication de --selenium
définit automatiquement --tags=selenium
pour ne lancer que les tests exigeant selenium.
Certains navigateurs (par ex. Chrome ou Firefox) prennent en charge les tests sans interface, ce qui peut être plus rapide et plus stable. Ajoutez l’option --headless
pour activer ce mode.
Pour tester des modifications à l’interface d’administration, les tests selenium peuvent être lancés avec l’option --screenshots
. Les captures d’écran seront enregistrées dans le répertoire tests/screenshots/
.
To define when screenshots should be taken during a selenium test, the test
class must use the @django.test.selenium.screenshot_cases
decorator with a
list of supported screenshot types ("desktop_size"
, "mobile_size"
,
"small_screen_size"
, "rtl"
, "dark"
, and "high_contrast"
). It
can then call self.take_screenshot("unique-screenshot-name")
at the desired
point to generate the screenshots. For example:
from django.test.selenium import SeleniumTestCase, screenshot_cases
from django.urls import reverse
class SeleniumTests(SeleniumTestCase):
@screenshot_cases(["desktop_size", "mobile_size", "rtl", "dark", "high_contrast"])
def test_login_button_centered(self):
self.selenium.get(self.live_server_url + reverse("admin:login"))
self.take_screenshot("login")
...
This generates multiple screenshots of the login page - one for a desktop screen, one for a mobile screen, one for right-to-left languages on desktop, one for the dark mode on desktop, and one for high contrast mode on desktop when using chrome.
L’option --screenshots
et le décorateur @screenshot_cases
ont été ajoutés.
Lancement de tous les tests¶
Si vous souhaitez lancer la suite de tests complète, vous devrez installer un certain nombre de dépendances :
- aiosmtpd
- argon2-cffi 19.2.0+
- asgiref 3.8.1+ (obligatoire)
- bcrypt
- colorama 0.4.6+
- docutils 0.19+
- geoip2
- Jinja2 2.11+
- numpy
- Pillow 6.2.1+
- PyYAML
- pytz (obligatoire)
- pywatchman
- redis 3.4+
- setuptools
- python-memcached, plus une liaison Python prise en charge
- gettext (gettext et Windows)
- selenium 4.8.0+
- sqlparse 0.3.1+ (obligatoire)
- tblib 1.5.0+
Vous pouvez trouver ces dépendances dans des fichiers de dépendances pip dans le répertoire tests/requirements
du code source de Django et vous pouvez les installer comme ceci :
$ python -m pip install -r tests/requirements/py3.txt
...\> py -m pip install -r tests\requirements\py3.txt
Si vous rencontrez une erreur durant l’installation, il est possible qu’une dépendance pour un ou plusieurs paquets Python manque sur votre système. Consultez la documentation du paquet problématique ou recherchez sur le Web avec le message d’erreur obtenu.
Vous pouvez également installer les adaptateurs de base de données de votre choix en utilisant oracle.txt
, mysql.txt
ou postgres.txt
.
Si vous souhaitez tester les moteurs de cache memcached
ou Redis
, vous devrez aussi définir un réglage CACHES
pointant sur votre instance memcached ou Redis.
Pour lancer les tests GeoDjango, il vous faudra configurer une base de données spatiale et installer les bibliothèques géospatiales.
Ces dépendances sont facultatives. Si l’une d’entre elle est absente, les tests correspondants seront sautés.
Pour exécuter certains tests autoreload
, il vous faudra installer le service Watchman.
La couverture de code¶
Les contributeurs sont encouragés à exécuter la couverture de code sur la suite de tests pour identifier les zones qui ont besoin de tests supplémentaires. L’installation et l’utilisation de l’outil de couverture sont décrites dans test de couverture du code.
Pour mesurer la couverture des tests de la suite de tests de Django en utilisant les réglages de test standards :
$ coverage run ./runtests.py --settings=test_sqlite
...\> coverage run runtests.py --settings=test_sqlite
Après avoir lancé la couverture des tests, combinez toutes les statistiques de couverture en exécutant :
$ coverage combine
...\> coverage combine
Puis, produisez le rapport HTML en exécutant :
$ coverage html
...\> coverage html
Lors de l’exécution de la couverture des tests Django, le fichier de réglages inclus coveragerc
définit coverage_html` comme répertoire de sortie pour le rapport et exclut également plusieurs répertoires non pertinents pour les résultats (code de test ou code externe inclus dans Django).
Applications contrib¶
Les tests des applications contribuées se trouvent dans le répertoire tests/, typiquement sous <nom_app>_tests
. Par exemple, les tests de contrib.auth
se trouvent dans tests/auth_tests.
Dépannage¶
La suite de tests plante ou affiche des échecs sur la branche main
¶
Vérifiez que la version de Python installée et prise en charge soit à jour avec sa dernière publication (dernier chiffre de version), dans la mesure où il y a souvent des bogues dans des versions précédentes qui peuvent causer l’échec ou le plantage de la suite de tests.
Sur macOS (High Sierra et plus récent), vous pourriez voir ce message journalisé, après lequel les tests sont bloqués :
objc[42074]: +[__NSPlaceholderDate initialize] may have been in progress in
another thread when fork() was called.
Pour éviter cela, définissez une variable d’environnement OBJC_DISABLE_INITIALIZE_FORK_SAFETY
, par exemple :
$ OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES ./runtests.py
Ou ajoutez export OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES
au fichier de démarrage de votre shell (par ex. ~/.profile
).
Nombreux échecs de tests avec UnicodeEncodeError
¶
Si le paquet locales
n’est pas installé, certains tests échoueront avec une exception UnicodeEncodeError
.
Il est possible de corriger cela par exemple sur les systèmes basés sur Debian en lançant :
$ apt-get install locales
$ dpkg-reconfigure locales
Il est possible de corriger cela sur les systèmes macOS en configurant la locale du shell :
$ export LANG="en_US.UTF-8"
$ export LC_ALL="en_US.UTF-8"
Lancez la commande locale
pour confirmer la modification. Une autre possibilité est d’ajouter ces commandes d’exportation au fichier de démarrage du shell (par ex. ~/.bashrc
pour Bash) afin d’éviter de devoir les retaper.
Tests qui n’échouent que lorsqu’ils sont combinés¶
Dans le cas où un test passe lorsqu’il est lancé seul mais échoue lorsque la suite de tests entière est lancée, nous disposons de certains outils pour aider à analyser le problème.
L’option --bisect
de runtests.py
va exécuter le test en échec en divisant par deux le groupe de tests avec lesquels il est exécuté lors de chaque itération, ce qui rend souvent possible l’identification d’un petit nombre de tests qui pourraient être liés à cet échec.
Par exemple, supposons que le test en échec qui fonctionne lorsqu’il est lancé seul est ModelTest.test_eq
. Alors, avec :
$ ./runtests.py --bisect basic.tests.ModelTest.test_eq
...\> runtests.py --bisect basic.tests.ModelTest.test_eq
on va essayer de déterminer un test qui interfère avec notre test cible. Pour commencer, le test est exécuté avec la première moitié de la suite de tests. Si un échec survient, cette première moitié est partagée en deux groupes et chaque groupe est ensuite exécuté avec le test cible. Si aucun échec ne survient avec la première moitié de la suite de tests, c’est la seconde moitié qui est exécutée avec le test cible et de nouveau partagée selon le procédé ci-dessus. Ceci se répète jusqu’à ce que le groupe de tests avec échec soit le plus petit possible.
L’option --pair
exécute le test donné conjointement avec chaque autre test de la suite, ce qui permet de vérifier si un autre test présente des effets de bord pouvant être la cause de l’échec. Donc :
$ ./runtests.py --pair basic.tests.ModelTest.test_eq
...\> runtests.py --pair basic.tests.ModelTest.test_eq
lancera test_eq
conjointement avec tous les autres tests individuels.
En combinant –bisect` et --pair
, si vous suspectez déjà quels cas pourraient être responsables de l’échec, vous pouvez limitez la combinaison des tests en indiquant d’autres étiquettes de test à la suite du premier :
$ ./runtests.py --pair basic.tests.ModelTest.test_eq queries transactions
...\> runtests.py --pair basic.tests.ModelTest.test_eq queries transactions
Vous pouvez aussi essayer de lancer un ensemble de tests dans un ordre aléatoire ou inversé avec les options --shuffle
et --reverse
. Cela peut aider à vérifier que l’exécution des tests dans un autre ordre ne cause pas de problème :
$ ./runtests.py basic --shuffle
$ ./runtests.py basic --reverse
...\> runtests.py basic --shuffle
...\> runtests.py basic --reverse
Affichage des requêtes SQL durant un test¶
Si vous souhaitez examiner les instructions SQL exécutées dans des tests en échec, vous pouvez activer la journalisation SQL en précisant l’option --debug-sql
. Si vous combinez cela avec --verbosity=2
, toutes les requêtes SQL seront affichées :
$ ./runtests.py basic --debug-sql
...\> runtests.py basic --debug-sql
Affichage de la trace d’erreur complète d’un échec de test¶
Par défaut, les tests sont exécutés en parallèle avec un processus par cœur. Cependant, lorsque les tests sont exécutés en parallèle, vous ne verrez qu’une trace d’erreur tronquée pour chaque échec de test. Vous pouvez ajuster ce comportement avec l’option --parallel
:
$ ./runtests.py basic --parallel=1
...\> runtests.py basic --parallel=1
Vous pouvez également utiliser la variable d’environnement DJANGO_TEST_PROCESSES
à cet effet.
Astuces d’écriture de tests¶
Isolation de l’inscription des modèles¶
Pour éviter de polluer le registre global apps
et empêcher des créations de table non désirées, les modèles définis dans une méthode de test devraient être liés à une instance Apps
temporaire. Pour cela, utilisez le décorateur isolate_apps()
:
from django.db import models
from django.test import SimpleTestCase
from django.test.utils import isolate_apps
class TestModelDefinition(SimpleTestCase):
@isolate_apps("app_label")
def test_model_definition(self):
class TestModel(models.Model):
pass
...
Définition de app_label
Les modèles définis dans une méthode de test sans app_label
explicite reçoivent automatiquement l’étiquette de l’application dans laquelle leur classe de test est située.
Dans l’optique de s’assurer que les modèles définis dans le contexte d’instances isolate_apps()
sont correctement installées, vous devriez transmettre l’ensemble des app_label
ciblées en tant que paramètres :
from django.db import models
from django.test import SimpleTestCase
from django.test.utils import isolate_apps
class TestModelDefinition(SimpleTestCase):
@isolate_apps("app_label", "other_app_label")
def test_model_definition(self):
# This model automatically receives app_label='app_label'
class TestModel(models.Model):
pass
class OtherAppModel(models.Model):
class Meta:
app_label = "other_app_label"
...