设置和环境变量

在许多情况下,您的应用程序可能需要一些外部设置或配置,例如密钥、数据库凭据、电子邮件服务的凭据等等。

这些设置中的大多数是可变的(可以更改的),比如数据库的 URL。而且许多设置可能是敏感的,比如密钥。

因此,通常会将它们提供为由应用程序读取的环境变量。

环境变量

Tip

如果您已经知道什么是”环境变量”以及如何使用它们,请随意跳到下面的下一节。

环境变量(也称为”env var”)是一种存在于 Python 代码之外、存在于操作系统中的变量,可以被您的 Python 代码(或其他程序)读取。

您可以在 shell 中创建和使用环境变量,而无需使用 Python:

Linux、macOS、Windows BashWindows PowerShell

  1. // 您可以创建一个名为 MY_NAME 的环境变量
  2. $ export MY_NAME="Wade Wilson"
  3. // 然后您可以与其他程序一起使用它,例如
  4. $ echo "Hello $MY_NAME"
  5. Hello Wade Wilson
  1. // 创建一个名为 MY_NAME 的环境变量
  2. $ $Env:MY_NAME = "Wade Wilson"
  3. // 与其他程序一起使用它,例如
  4. $ echo "Hello $Env:MY_NAME"
  5. Hello Wade Wilson

在 Python 中读取环境变量

您还可以在 Python 之外的地方(例如终端中或使用任何其他方法)创建环境变量,然后在 Python 中读取它们。

例如,您可以有一个名为 main.py 的文件,其中包含以下内容:

  1. import os
  2. name = os.getenv("MY_NAME", "World")
  3. print(f"Hello {name} from Python")

Tip

os.getenv() 的第二个参数是要返回的默认值。

如果没有提供默认值,默认为 None,此处我们提供了 "World" 作为要使用的默认值。

然后,您可以调用该 Python 程序:

  1. // 这里我们还没有设置环境变量
  2. $ python main.py
  3. // 因为我们没有设置环境变量,所以我们得到默认值
  4. Hello World from Python
  5. // 但是如果我们先创建一个环境变量
  6. $ export MY_NAME="Wade Wilson"
  7. // 然后再次调用程序
  8. $ python main.py
  9. // 现在它可以读取环境变量
  10. Hello Wade Wilson from Python

由于环境变量可以在代码之外设置,但可以由代码读取,并且不需要与其他文件一起存储(提交到 git),因此通常将它们用于配置或设置。

您还可以仅为特定程序调用创建一个环境变量,该环境变量仅对该程序可用,并且仅在其运行期间有效。

要做到这一点,在程序本身之前的同一行创建它:

  1. // 在此程序调用行中创建一个名为 MY_NAME 的环境变量
  2. $ MY_NAME="Wade Wilson" python main.py
  3. // 现在它可以读取环境变量
  4. Hello Wade Wilson from Python
  5. // 之后环境变量不再存在
  6. $ python main.py
  7. Hello World from Python

Tip

您可以在 Twelve-Factor App: Config 中阅读更多相关信息。

类型和验证

这些环境变量只能处理文本字符串,因为它们是外部于 Python 的,并且必须与其他程序和整个系统兼容(甚至与不同的操作系统,如 Linux、Windows、macOS)。

这意味着从环境变量中在 Python 中读取的任何值都将是 str 类型,任何类型的转换或验证都必须在代码中完成。

Pydantic 的 Settings

幸运的是,Pydantic 提供了一个很好的工具来处理来自环境变量的设置,即Pydantic: Settings management

创建 Settings 对象

从 Pydantic 导入 BaseSettings 并创建一个子类,与 Pydantic 模型非常相似。

与 Pydantic 模型一样,您使用类型注释声明类属性,还可以指定默认值。

您可以使用与 Pydantic 模型相同的验证功能和工具,比如不同的数据类型和使用 Field() 进行附加验证。

  1. from fastapi import FastAPI
  2. from pydantic_settings import BaseSettings
  3. class Settings(BaseSettings):
  4. app_name: str = "Awesome API"
  5. admin_email: str
  6. items_per_user: int = 50
  7. settings = Settings()
  8. app = FastAPI()
  9. @app.get("/info")
  10. async def info():
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }

Tip

如果您需要一个快速的复制粘贴示例,请不要使用此示例,而应使用下面的最后一个示例。

然后,当您创建该 Settings 类的实例(在此示例中是 settings 对象)时,Pydantic 将以不区分大小写的方式读取环境变量,因此,大写的变量 APP_NAME 仍将为属性 app_name 读取。

然后,它将转换和验证数据。因此,当您使用该 settings 对象时,您将获得您声明的类型的数据(例如 items_per_user 将为 int 类型)。

使用 settings

然后,您可以在应用程序中使用新的 settings 对象:

  1. from fastapi import FastAPI
  2. from pydantic_settings import BaseSettings
  3. class Settings(BaseSettings):
  4. app_name: str = "Awesome API"
  5. admin_email: str
  6. items_per_user: int = 50
  7. settings = Settings()
  8. app = FastAPI()
  9. @app.get("/info")
  10. async def info():
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }

运行服务器

接下来,您将运行服务器,并将配置作为环境变量传递。例如,您可以设置一个 ADMIN_EMAILAPP_NAME,如下所示:

  1. $ ADMIN_EMAIL="deadpool@example.com" APP_NAME="ChimichangApp"uvicorn main:app
  2. <span style="color: green;">INFO</span>: Uvicorn running on http://127.0.0.1:8000 (Press CTRL+C to quit)

Tip

要为单个命令设置多个环境变量,只需用空格分隔它们,并将它们全部放在命令之前。

然后,admin_email 设置将为 "deadpool@example.com"

app_name 将为 "ChimichangApp"

items_per_user 将保持其默认值为 50

在另一个模块中设置

您可以将这些设置放在另一个模块文件中,就像您在Bigger Applications - Multiple Files中所见的那样。

例如,您可以创建一个名为 config.py 的文件,其中包含以下内容:

  1. from pydantic_settings import BaseSettings
  2. class Settings(BaseSettings):
  3. app_name: str = "Awesome API"
  4. admin_email: str
  5. items_per_user: int = 50
  6. settings = Settings()

然后在一个名为 main.py 的文件中使用它:

  1. from fastapi import FastAPI
  2. from .config import settings
  3. app = FastAPI()
  4. @app.get("/info")
  5. async def info():
  6. return {
  7. "app_name": settings.app_name,
  8. "admin_email": settings.admin_email,
  9. "items_per_user": settings.items_per_user,
  10. }

Tip

您还需要一个名为 __init__.py 的文件,就像您在Bigger Applications - Multiple Files中看到的那样。

在依赖项中使用设置

在某些情况下,从依赖项中提供设置可能比在所有地方都使用全局对象 settings 更有用。

这在测试期间尤其有用,因为很容易用自定义设置覆盖依赖项。

配置文件

根据前面的示例,您的 config.py 文件可能如下所示:

  1. from pydantic_settings import BaseSettings
  2. class Settings(BaseSettings):
  3. app_name: str = "Awesome API"
  4. admin_email: str
  5. items_per_user: int = 50

请注意,现在我们不创建默认实例 settings = Settings()

主应用程序文件

现在我们创建一个依赖项,返回一个新的 config.Settings()

Python 3.9+Python 3.8+Python 3.8+ 非注解版本

  1. from functools import lru_cache
  2. from typing import Annotated
  3. from fastapi import Depends, FastAPI
  4. from .config import Settings
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }
  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from typing_extensions import Annotated
  4. from .config import Settings
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }

Tip

如果可能,请尽量使用 Annotated 版本。

  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from .config import Settings
  4. app = FastAPI()
  5. @lru_cache()
  6. def get_settings():
  7. return Settings()
  8. @app.get("/info")
  9. async def info(settings: Settings = Depends(get_settings)):
  10. return {
  11. "app_name": settings.app_name,
  12. "admin_email": settings.admin_email,
  13. "items_per_user": settings.items_per_user,
  14. }

Tip

我们稍后会讨论 @lru_cache()

目前,您可以将 get_settings() 视为普通函数。

然后,我们可以将其作为依赖项从“路径操作函数”中引入,并在需要时使用它。

Python 3.9+Python 3.8+Python 3.8+ 非注解版本

  1. from functools import lru_cache
  2. from typing import Annotated
  3. from fastapi import Depends, FastAPI
  4. from .config import Settings
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }
  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from typing_extensions import Annotated
  4. from .config import Settings
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }

Tip

如果可能,请尽量使用 Annotated 版本。

  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from .config import Settings
  4. app = FastAPI()
  5. @lru_cache()
  6. def get_settings():
  7. return Settings()
  8. @app.get("/info")
  9. async def info(settings: Settings = Depends(get_settings)):
  10. return {
  11. "app_name": settings.app_name,
  12. "admin_email": settings.admin_email,
  13. "items_per_user": settings.items_per_user,
  14. }

设置和测试

然后,在测试期间,通过创建 get_settings 的依赖项覆盖,很容易提供一个不同的设置对象:

  1. from fastapi.testclient import TestClient
  2. from .config import Settings
  3. from .main import app, get_settings
  4. client = TestClient(app)
  5. def get_settings_override():
  6. return Settings(admin_email="testing_admin@example.com")
  7. app.dependency_overrides[get_settings] = get_settings_override
  8. def test_app():
  9. response = client.get("/info")
  10. data = response.json()
  11. assert data == {
  12. "app_name": "Awesome API",
  13. "admin_email": "testing_admin@example.com",
  14. "items_per_user": 50,
  15. }

在依赖项覆盖中,我们在创建新的 Settings 对象时为 admin_email 设置了一个新值,然后返回该新对象。

然后,我们可以测试它是否被使用。

.env 文件中读取设置

如果您有许多可能经常更改的设置,可能在不同的环境中,将它们放在一个文件中,然后从该文件中读取它们,就像它们是环境变量一样,可能非常有用。

这种做法相当常见,有一个名称,这些环境变量通常放在一个名为 .env 的文件中,该文件被称为“dotenv”。

Tip

以点 (.) 开头的文件是 Unix-like 系统(如 Linux 和 macOS)中的隐藏文件。

但是,dotenv 文件实际上不一定要具有确切的文件名。

Pydantic 支持使用外部库从这些类型的文件中读取。您可以在Pydantic 设置: Dotenv (.env) 支持中阅读更多相关信息。

Tip

要使其工作,您需要执行 pip install python-dotenv

.env 文件

您可以使用以下内容创建一个名为 .env 的文件:

  1. ADMIN_EMAIL="deadpool@example.com"
  2. APP_NAME="ChimichangApp"

.env 文件中读取设置

然后,您可以使用以下方式更新您的 config.py

  1. from pydantic_settings import BaseSettings
  2. class Settings(BaseSettings):
  3. app_name: str = "Awesome API"
  4. admin_email: str
  5. items_per_user: int = 50
  6. class Config:
  7. env_file = ".env"

在这里,我们在 Pydantic 的 Settings 类中创建了一个名为 Config 的类,并将 env_file 设置为我们想要使用的 dotenv 文件的文件名。

Tip

Config 类仅用于 Pydantic 配置。您可以在Pydantic Model Config中阅读更多相关信息。

使用 lru_cache 仅创建一次 Settings

从磁盘中读取文件通常是一项耗时的(慢)操作,因此您可能希望仅在首次读取后并重复使用相同的设置对象,而不是为每个请求都读取它。

但是,每次执行以下操作:

  1. Settings()

都会创建一个新的 Settings 对象,并且在创建时会再次读取 .env 文件。

如果依赖项函数只是这样的:

  1. def get_settings():
  2. return Settings()

我们将为每个请求创建该对象,并且将在每个请求中读取 .env 文件。 ⚠️

但是,由于我们在顶部使用了 @lru_cache() 装饰器,因此只有在第一次调用它时,才会创建 Settings 对象一次。 ✔️

Python 3.9+Python 3.8+Python 3.8+ 非注解版本

  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from typing_extensions import Annotated
  4. from . import config
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return config.Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[config.Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }
  1. from functools import lru_cache
  2. from typing import Annotated
  3. from fastapi import Depends, FastAPI
  4. from . import config
  5. app = FastAPI()
  6. @lru_cache()
  7. def get_settings():
  8. return config.Settings()
  9. @app.get("/info")
  10. async def info(settings: Annotated[config.Settings, Depends(get_settings)]):
  11. return {
  12. "app_name": settings.app_name,
  13. "admin_email": settings.admin_email,
  14. "items_per_user": settings.items_per_user,
  15. }

Tip

如果可能,请尽量使用 Annotated 版本。

  1. from functools import lru_cache
  2. from fastapi import Depends, FastAPI
  3. from . import config
  4. app = FastAPI()
  5. @lru_cache()
  6. def get_settings():
  7. return config.Settings()
  8. @app.get("/info")
  9. async def info(settings: config.Settings = Depends(get_settings)):
  10. return {
  11. "app_name": settings.app_name,
  12. "admin_email": settings.admin_email,
  13. "items_per_user": settings.items_per_user,
  14. }

然后,在下一次请求的依赖项中对 get_settings() 进行任何后续调用时,它不会执行 get_settings() 的内部代码并创建新的 Settings 对象,而是返回在第一次调用时返回的相同对象,一次又一次。

lru_cache 技术细节

@lru_cache() 修改了它所装饰的函数,以返回第一次返回的相同值,而不是再次计算它,每次都执行函数的代码。

因此,下面的函数将对每个参数组合执行一次。然后,每个参数组合返回的值将在使用完全相同的参数组合调用函数时再次使用。

例如,如果您有一个函数:

  1. @lru_cache()
  2. def say_hi(name: str, salutation: str = "Ms."):
  3. return f"Hello {salutation} {name}"

您的程序可以像这样执行:

  1. sequenceDiagram
  2. participant code as Code
  3. participant function as say_hi()
  4. participant execute as Execute function
  5. rect rgba(0, 255, 0, .1)
  6. code ->> function: say_hi(name="Camila")
  7. function ->> execute: 执行函数代码
  8. execute ->> code: 返回结果
  9. end
  10. rect rgba(0, 255, 255, .1)
  11. code ->> function: say_hi(name="Camila")
  12. function ->> code: 返回存储的结果
  13. end
  14. rect rgba(0, 255, 0, .1)
  15. code ->> function: say_hi(name="Rick")
  16. function ->> execute: 执行函数代码
  17. execute ->> code: 返回结果
  18. end
  19. rect rgba(0, 255, 0, .1)
  20. code ->> function: say_hi(name="Rick", salutation="Mr.")
  21. function ->> execute: 执行函数代码
  22. execute ->> code: 返回结果
  23. end
  24. rect rgba(0, 255, 255, .1)
  25. code ->> function: say_hi(name="Rick")
  26. function ->> code: 返回存储的结果
  27. end
  28. rect rgba(0, 255, 255, .1)
  29. code ->> function: say_hi(name="Camila")
  30. function ->> code: 返回存储的结果
  31. end

对于我们的依赖项 get_settings(),该函数甚至不接受任何参数,因此它始终返回相同的值。

这样,它的行为几乎就像是一个全局变量。但是由于它使用了依赖项函数,因此我们可以轻松地进行测试时的覆盖。

@lru_cache()functools 的一部分,它是 Python 标准库的一部分,您可以在Python 文档中了解有关 @lru_cache() 的更多信息

小结

您可以使用 Pydantic 设置处理应用程序的设置或配置,利用 Pydantic 模型的所有功能。

  • 通过使用依赖项,您可以简化测试。
  • 您可以使用 .env 文件。
  • 使用 @lru_cache() 可以避免为每个请求重复读取 dotenv 文件,同时允许您在测试时进行覆盖。