Skip to content

pythontoolscheatsheet.md

Latest commit

 

History

History
381 lines (303 loc) · 15.3 KB

pythontoolscheatsheet.md

File metadata and controls

381 lines (303 loc) · 15.3 KB
Raw
Title 🐍 Python — venv/pip/pipx/poetry
Group Dev & Tools
Icon 🐍
Order 3
tags
dev-tools
devops
sysadmin

Python Tools Cheatsheet — venv / pip / pipx / poetry / pyenv

Description: A collection of Python ecosystem tools for virtual environment management, package management, and version management. venv is the built-in virtual environment module (Python 3.3+). pip is the standard package installer. pipx installs CLI tools in isolated environments. poetry is a modern all-in-one dependency manager. pyenv manages multiple Python versions. Коллекция инструментов экосистемы Python для управления виртуальными окружениями, пакетами и версиями. venv — встроенный модуль виртуальных окружений. pip — стандартный установщик пакетов. pipx — изолированная установка CLI. poetry — современный менеджер зависимостей. pyenv — управление версиями Python.

Status: All actively maintained. uv (by Astral, Rust-based) is an emerging ultra-fast alternative to pip/pip-tools/virtualenv/pyenv. pdm is another modern alternative to poetry. Role: Developer / DevOps / Data Scientist

Table of Contents

🌍 venv — Virtual Environments

Create & Activate

python3 -m venv .venv                         # Create venv / Создать venv
source .venv/bin/activate                     # Activate (Linux/Mac) / Активировать (Linux/Mac)
.venv\Scripts\activate                        # Activate (Windows) / Активировать (Windows)
deactivate                                    # Deactivate venv / Деактивировать venv

With System Packages

python3 -m venv --system-site-packages .venv  # Include system packages / Включить системные пакеты
python3 -m venv --clear .venv                 # Recreate venv / Пересоздать venv

📦 pip — Package Manager

Install Packages

pip install requests                          # Install package / Установить пакет
pip install requests==2.28.0                  # Install specific version / Установить конкретную версию
pip install requests>=2.28.0                  # Install minimum version / Установить минимальную версию
pip install -e .                              # Install in editable mode / Установить в редактируемом режиме

Requirements Files

pip install -r requirements.txt               # Install from file / Установить из файла
pip freeze > requirements.txt                 # Generate requirements / Сгенерировать requirements
pip install -r requirements-dev.txt           # Install dev dependencies / Установить dev зависимости

Update & Upgrade

pip install -U pip                            # Upgrade pip / Обновить pip
pip install -U pip setuptools wheel           # Update base tools / Обновить базовые инструменты
pip install -U requests                       # Upgrade package / Обновить пакет
pip list --outdated                           # Show outdated packages / Показать устаревшие пакеты

Remove & Clean

pip uninstall requests                        # Uninstall package / Удалить пакет
pip uninstall -r requirements.txt -y          # Uninstall from file / Удалить из файла
pip cache purge                               # Clear cache / Очистить кэш

List & Show

pip list                                      # List installed packages / Список установленных пакетов
pip show requests                             # Show package info / Показать информацию о пакете
pip check                                     # Verify dependencies / Проверить зависимости

🎯 pipx — CLI Tool Installer

Install Tools

pipx install black                            # Install CLI tool / Установить CLI инструмент
pipx install flake8                           # Install linter / Установить линтер
pipx install poetry                           # Install poetry / Установить poetry
pipx install ansible                          # Install ansible / Установить ansible

Manage Tools

pipx list                                     # List installed tools / Список установленных инструментов
pipx upgrade black                            # Upgrade tool / Обновить инструмент
pipx upgrade-all                              # Upgrade all tools / Обновить все инструменты
pipx uninstall black                          # Uninstall tool / Удалить инструмент

Run Temporarily

pipx run black script.py                      # Run without installing / Запустить без установки
pipx run --spec black==22.0.0 black           # Run specific version / Запустить конкретную версию

📚 poetry — Dependency Management

Initialize Project

poetry new myproject                          # Create new project / Создать новый проект
poetry init                                   # Initialize in existing dir / Инициализировать в существующей директории

Install Dependencies

poetry install                                # Install dependencies / Установить зависимости
poetry add requests                           # Add package / Добавить пакет
poetry add -D pytest                          # Add dev dependency / Добавить dev зависимость
poetry add requests@^2.28.0                   # Add with version constraint / Добавить с ограничением версии

Update & Remove

poetry update                                 # Update dependencies / Обновить зависимости
poetry update requests                        # Update specific package / Обновить конкретный пакет
poetry remove requests                        # Remove package / Удалить пакет

Virtual Environment

poetry shell                                  # Activate venv / Активировать venv
poetry run python script.py                   # Run in venv / Запустить в venv
poetry run pytest                             # Run tests / Запустить тесты
poetry env info                               # Show venv info / Показать информацию о venv

Build & Publish

poetry build                                  # Build package / Собрать пакет
poetry publish                                # Publish to PyPI / Опубликовать в PyPI
poetry publish --build                        # Build and publish / Собрать и опубликовать

🔧 pyenv — Python Version Manager

Install Python Versions

pyenv install 3.11.0                          # Install specific version / Установить конкретную версию
pyenv install 3.11:latest                     # Install latest 3.11 / Установить последнюю 3.11
pyenv install --list                          # List available versions / Список доступных версий

Use Python Versions

pyenv global 3.11.0                           # Set global version / Установить глобальную версию
pyenv local 3.10.0                            # Set local version / Установить локальную версию
pyenv shell 3.11.0                            # Set shell version / Установить версию для shell

List & Manage

pyenv versions                                # List installed versions / Список установленных версий
pyenv version                                 # Show current version / Показать текущую версию
pyenv uninstall 3.9.0                         # Uninstall version / Удалить версию

pyenv Priority

Priority Method Description (EN / RU)
1 (highest) PYENV_VERSION env var Environment variable / Переменная окружения
2 pyenv shell Current shell session / Текущая сессия shell
3 pyenv local .python-version file in project / Файл .python-version в проекте
4 (lowest) pyenv global ~/.pyenv/version file / Файл ~/.pyenv/version

Virtual Environment Tools Comparison

Tool Type Description (EN / RU) Best For
venv Built-in (Python 3.3+) Standard library virtual environments / Виртуальные окружения из стандартной библиотеки Simple projects, no extra install
virtualenv Third-party More features than venv / Больше функций чем venv Legacy Python, advanced options
conda Full environment manager Manages Python + system packages / Управляет Python + системными пакетами Data science, non-Python dependencies
poetry All-in-one Dependency management + venv + packaging / Управление зависимостями + venv + сборка Modern Python projects
pipx CLI tool installer Isolated environments for CLI tools / Изолированные окружения для CLI инструментов Installing CLI tools globally
uv Ultra-fast (Rust-based) Replaces pip/pip-tools/virtualenv / Замена pip/pip-tools/virtualenv Speed-critical workflows, modern projects

Requirements Files

File Purpose (EN / RU)
requirements.txt Production dependencies / Продакшн зависимости
requirements-dev.txt Development dependencies / Dev зависимости
requirements-test.txt Test dependencies / Тестовые зависимости
pyproject.toml Modern Poetry/PEP 621 format / Современный формат Poetry/PEP 621

Package Indexes

Index URL Description (EN / RU)
PyPI https://pypi.org Official package index / Официальный индекс
TestPyPI https://test.pypi.org Testing & staging / Тестирование и подготовка
Private Configure in pip.conf Private repositories / Приватные репозитории

🐛 Troubleshooting

Reinstall Packages

# Clean install
rm -rf .venv
python3 -m venv .venv
source .venv/bin/activate
pip install -U pip setuptools wheel
pip install -r requirements.txt

Fix SSL Issues

pip install --trusted-host pypi.org --trusted-host files.pythonhosted.org <PACKAGE>

Fix Permission Issues

pip install --user <PACKAGE>                  # Install for user / Установить для пользователя

Resolve Conflicts

pip install pip-tools                         # Install pip-tools / Установить pip-tools
pip-compile requirements.in                   # Compile dependencies / Скомпилировать зависимости
pip-sync requirements.txt                     # Sync environment / Синхронизировать окружение

Common Error: externally-managed-environment

# Error: "externally-managed-environment" (Python 3.11+ on Debian/Ubuntu)
# Solution: Always use venv or --break-system-packages
#

python3 -m venv .venv && source .venv/bin/activate  # Recommended / Рекомендуется
pip install --break-system-packages <PACKAGE>       # Not recommended / Не рекомендуется

Warning

--break-system-packages bypasses system protection and may break system Python. Always prefer virtual environments. --break-system-packages обходит защиту системы и может сломать системный Python. Всегда используйте виртуальные окружения.

🌟 Real-World Examples

New Python Project

# Create project
mkdir myproject && cd myproject
python3 -m venv .venv
source .venv/bin/activate

# Install tools
pip install -U pip setuptools wheel
pip install black flake8 pytest

# Create requirements
pip freeze > requirements.txt

Poetry Project

# Initialize
poetry new myproject
cd myproject

# Add dependencies
poetry add fastapi uvicorn
poetry add -D pytest black

# Run
poetry run python main.py

Jupyter Notebook / Jupyter Notebook

# Install Jupyter
pip install jupyter notebook

# Create kernel
python -m ipykernel install --user --name=myproject

# Start notebook
jupyter notebook

Flask Development

python3 -m venv .venv
source .venv/bin/activate
pip install flask python-dotenv
pip install -D pytest pytest-flask

# Run dev server
export FLASK_APP=app.py
export FLASK_ENV=development
flask run

Django Setup

python3 -m venv .venv
source .venv/bin/activate
pip install django psycopg2-binary python-dotenv

# Create project
django-admin startproject myproject .
python manage.py migrate
python manage.py runserver

Data Science Environment

python3 -m venv .venv
source .venv/bin/activate
pip install numpy pandas matplotlib jupyter scikit-learn

# Save requirements
pip freeze > requirements.txt

CLI Tool Development

# Install in editable mode
pip install -e .

# Run CLI
mycli --help

Docker Python Image / Docker

FROM python:3.11-slim
WORKDIR /app
COPY requirements.txt .
RUN pip install --no-cache-dir -r requirements.txt
COPY . .
CMD ["python", "app.py"]

💡 Best Practices

  • Always use virtual environments / Всегда используйте виртуальные окружения
  • Pin dependencies in requirements.txt / Фиксируйте зависимости в requirements.txt
  • Separate dev dependencies / Разделяйте dev зависимости
  • Use pipx for CLI tools / Используйте pipx для CLI инструментов
  • Update pip before installing packages / Обновляйте pip перед установкой пакетов
  • Use poetry for modern dependency management / Используйте poetry для современного управления зависимостями

Official Documentation