This media is not supported in your browser
VIEW IN TELEGRAM
skyvern | Скрейпинг с LLM + CV
Опираться при парсинге на DOM / xPath нынче не модно... Инструмент использует GPT и компьютерное зрение, чтобы «понимать» содержимое веб-страницы и выполнять нужные вам действия. Заодно и токенов сэкономите: ведь весь HTML-код страницы читать не требуется.
Доступен в РФ: да
Цена: бесплатно
@prog_tools
Опираться при парсинге на DOM / xPath нынче не модно... Инструмент использует GPT и компьютерное зрение, чтобы «понимать» содержимое веб-страницы и выполнять нужные вам действия. Заодно и токенов сэкономите: ведь весь HTML-код страницы читать не требуется.
Доступен в РФ: да
Цена: бесплатно
@prog_tools
✍2❤1
Python. Экспресс-курс
Книга для программистов, имеющих опыт с другими ЯП. В издании представлены актуальные возможности Python 3 с учетом последних 5 лет.
Последние главы книги посвящены работе с большими данными, что делает её полезной для тех, кто планирует использовать Python в аналитике и машинном обучении.
#книга
@zen_of_python
Книга для программистов, имеющих опыт с другими ЯП. В издании представлены актуальные возможности Python 3 с учетом последних 5 лет.
Последние главы книги посвящены работе с большими данными, что делает её полезной для тех, кто планирует использовать Python в аналитике и машинном обучении.
#книга
@zen_of_python
👍5🗿3❤1
Вопросы подписчиков
Zen of Python поддерживает новоприбывших (и не только) в особой рубрике. Как это работает:
— Спрашивайте что угодно (в комментариях под этим постом), связанное с Python. Здесь нет плохих вопросов!
— Сообщество вас поддержит. Самые интересные вопросы мы разберём в отдельном посте.
#обсуждение
@zen_of_python
Zen of Python поддерживает новоприбывших (и не только) в особой рубрике. Как это работает:
— Спрашивайте что угодно (в комментариях под этим постом), связанное с Python. Здесь нет плохих вопросов!
— Сообщество вас поддержит. Самые интересные вопросы мы разберём в отдельном посте.
#обсуждение
@zen_of_python
❤3
Смысл жизни по Монти Пайтону (1983)
Можно сколько угодно смотреть мемы про питонов, но язык назван в честь комиков Monty Python.
Если вам нужен фильм на выходные, и вы хотите знать, чем же так юмористы вдохновили создателя ЯП Гвидо ван Россума, посмотрите одну из их шедевральных полнометражек — «Смысл жизни по Монти Пайтону».
Это серия скетчей, каждый из которых как бы упражняет вашу способность справляться с абсурдом действительности. То выгоревшие страховщики, уплывшие покорять на корабле-доме другой континент, то дети, поющие о небогоугодных презервативах, то обжора, которого разрывает на части прямо в ресторане. Таких чеканутых сюжетов еще поискать.
#факт
@zen_of_python
Можно сколько угодно смотреть мемы про питонов, но язык назван в честь комиков Monty Python.
Если вам нужен фильм на выходные, и вы хотите знать, чем же так юмористы вдохновили создателя ЯП Гвидо ван Россума, посмотрите одну из их шедевральных полнометражек — «Смысл жизни по Монти Пайтону».
Это серия скетчей, каждый из которых как бы упражняет вашу способность справляться с абсурдом действительности. То выгоревшие страховщики, уплывшие покорять на корабле-доме другой континент, то дети, поющие о небогоугодных презервативах, то обжора, которого разрывает на части прямо в ресторане. Таких чеканутых сюжетов еще поискать.
#факт
@zen_of_python
❤🔥3😱1
А во сколько лет вы узнали, что можно использовать любое количество пробелов для отступа, главное, чтобы они были одинаковыми в пределах одного блока? Код ниже не выдаст ошибку (даже если вызвать say_hi():
#кек
@zen_of_python
#кек
@zen_of_python
👍8
Шпаргкалка SQL.pdf
1.2 MB
Шпаргалка SQL для собесов
Помимо базы еще полезное про:
— Вложенные запросы (CTE);
— JOIN'ы;
— Оконные функции;
— Подзапросы;
— SET;
— GROUP BY;
— LAG;
— CASE и проч.
#обучение
@zen_of_python
Помимо базы еще полезное про:
— Вложенные запросы (CTE);
— JOIN'ы;
— Оконные функции;
— Подзапросы;
— SET;
— GROUP BY;
— LAG;
— CASE и проч.
#обучение
@zen_of_python
❤4👍2
Что такое JSON и зачем он нужен
JSON (JavaScript Object Notation) — текстовый формат для обмена данными, удобный для людей и машин. Он возник в экосистеме JavaScript, но стал язык-независимым стандартом для API, конфигураций и документных хранилищ. Формат простой: объекты (пар «ключ: значение») и массивы — это основные строительные блоки.
Почему Python-разработчику это важно:
🔘 JSON часто используется в web-API, логах, конфигурациях и при обмене данными между сервисами.
🔘 Python имеет встроенный модуль json, который делает сериализует (Python → JSON) и десериализует (JSON → Python).
Синтаксис JSON
🔘 Строки — в двойных кавычках (
🔘 Логические значения — в нижнем регистре:
🔘 Отсутствующее значение —
🔘 Нельзя оставлять комментарии и нельзя ставить завершающие запятые после последнего элемента.
Валидный JSON:
Модуль json
Главные функции одноименного модуля стандартной библиотеки:
🔘
🔘
🔘
🔘
Эти функции следуют стандартному отображению типов: словари → объекты, списки → массивы, строки → строки, числа → числа,
Полезные параметры dumps / dump
При сериализации полезны параметры:
🔘
🔘
🔘
🔘
🔘
Маппинг типов
При загрузке JSON в Python выполняется обратное отображение типов:
*
*
*
*
*
*
JSON-ключи — всегда строки. Если у вас в исходном Python-словаре были числовые ключи (например
Полезные утилиты и приёмы
🔘
🔘 Онлайн-валидаторы (например, JSONLint) и редакторы с подсветкой помогут быстро найти синтаксические ошибки (комментарии, лишние запятые и т. п.).
Подборка примеров
Читаем JSON из файла:
Записываем с красивым форматированием:
Сериализуем datetime:
Проверяем валидность JSON в CLI
#основы
@zen_of_python
JSON (JavaScript Object Notation) — текстовый формат для обмена данными, удобный для людей и машин. Он возник в экосистеме JavaScript, но стал язык-независимым стандартом для API, конфигураций и документных хранилищ. Формат простой: объекты (пар «ключ: значение») и массивы — это основные строительные блоки.
Почему Python-разработчику это важно:
Синтаксис JSON
"..."
);true / false
(в Python — True / False
);null
(в Python → None
);Валидный JSON:
{
"name": "Frieda",
"isDog": true,
"hobbies": ["eating", "sleeping"],
"age": 8,
"address": {"home": ["Berlin", "Germany"], "work": null}
}
Модуль json
Главные функции одноименного модуля стандартной библиотеки:
json.dumps(obj, **opts)
— сериализует Python-объект в строку JSON;json.dump(obj, fp, **opts)
— сериализует и записывает в файл-объект;json.loads(s)
— парсит JSON-строку в Python-объект;json.load(fp)
— считывает JSON из файла и парсит.Эти функции следуют стандартному отображению типов: словари → объекты, списки → массивы, строки → строки, числа → числа,
True
/ False
→ true
/ false
, None
→ null
.
import json
data = {"name": "Frieda", "age": 8, "is_dog": True}
s = json.dumps(data) # --> '{"name": "Frieda", "age": 8, "is_dog": true}'
obj = json.loads(s) # --> {'name': 'Frieda', 'age': 8, 'is_dog': True}
Полезные параметры dumps / dump
При сериализации полезны параметры:
indent
— делает вывод читабельным (pretty print) (например, indent=2);sort_keys=True
— сортирует ключи объекта по алфавиту;separators
— позволяет контролировать символы между элементами (полезно для минификации);ensure_ascii=False
— по умолчанию json экранирует не-ASCII символы; если хотите сохранить UTF-8 в читаемом виде, ставьте False;skipkeys=True
— пропускает неподдерживаемые типы ключей вместо TypeError (использовать осторожно — вы можете потерять данные).Маппинг типов
При загрузке JSON в Python выполняется обратное отображение типов:
*
object
→ dict
*
array
→ list
*
string
→ str
*
number
→ int
/ float
*
true`/`false
→ True`/`False
*
null
→ None
JSON-ключи — всегда строки. Если у вас в исходном Python-словаре были числовые ключи (например
{1: "a"}`), при сериализации они станут строками (`"1"`). После `json.loads()
вы получите ключи как строки — Python не "угадает" исходный тип. Это частая ловушка при конвертации словарей ключами-числами.Полезные утилиты и приёмы
python -m json.tool
— встроенная утилита для форматирования/проверки JSON в терминале (можно использовать для prettify/minify);Подборка примеров
Читаем JSON из файла:
import json
with open("data.json", "r", encoding="utf-8") as f:
data = json.load(f)
Записываем с красивым форматированием:
with open("data_pretty.json", "w", encoding="utf-8") as f:
json.dump(data, f, indent=2, sort_keys=True, ensure_ascii=False)
Сериализуем datetime:
from datetime import datetime
import json
def default(o):
if isinstance(o, datetime):
return o.isoformat()
raise TypeError
json.dumps({"now": datetime.utcnow()}, default=default)
Проверяем валидность JSON в CLI
python -m json.tool input.json > /dev/null
# код возврата 0 — валидный JSON
#основы
@zen_of_python
Please open Telegram to view this post
VIEW IN TELEGRAM
❤10
Фабрики в Python
В программировании довольно часто встречается задача: в зависимости от входных данных нужно выбрать подходящий класс для обработки. Например, у нас есть XML-файлы и JSON-файлы, и мы хотим написать систему, которая будет их импортировать.
На первый взгляд решение простое — внутри метода проверять расширение файла и создавать соответствующий объект. Но у такого подхода есть несколько серьёзных недостатков. Именно здесь на помощь приходит паттерн «Фабрика».
Рассмотрим упрощённый пример кода:
На первый взгляд код рабочий, но здесь нарушаются два принципа SOLID:
1️⃣ Принцип единственной ответственности (Single Responsibility Principle): класс Document отвечает сразу за создание объектов XMLImporter, JSONImporter и их использование.
2️⃣ Принцип открытости / закрытости (Open / Closed Principle).
Если появится новый формат (например, CSV), придётся снова лезть в метод import_file и расширять блок if / elif.
Решение: фабрика
Чтобы убрать ответственность за создание объектов из класса Document, вводится так называемася фабрика. Это объект, который берёт на себя ответственность за создание других объектов. Она не избавляет нас полностью от изменения кода при добавлении новых форматов, но значительно улучшает читаемость, гибкость и расширяемость системы.
Теперь
Преимущества фабрики
1️⃣ Изоляция ответственности: логика создания объектов теперь сосредоточена только в одном месте — в ImporterFactory.
2️⃣ Гибкость: если нужно добавить поддержку нового формата (CSV, YAML и т.д.), достаточно изменить фабрику, не трогая Document.
3️⃣ Удобное тестирование: в тестах можно подменить фабрику на «фиктивную» (mock) и проверять работу Document независимо от импортеров.
Что дальше?
Фабрика — это базовый паттерн. На его основе строятся более сложные подходы, например:
🔘 Factory Method — когда создание объектов делегируется подклассам.
🔘 Abstract Factory — когда фабрика создаёт целые семейства объектов, согласованных между собой.
#основы
@zen_of_python
В программировании довольно часто встречается задача: в зависимости от входных данных нужно выбрать подходящий класс для обработки. Например, у нас есть XML-файлы и JSON-файлы, и мы хотим написать систему, которая будет их импортировать.
На первый взгляд решение простое — внутри метода проверять расширение файла и создавать соответствующий объект. Но у такого подхода есть несколько серьёзных недостатков. Именно здесь на помощь приходит паттерн «Фабрика».
Рассмотрим упрощённый пример кода:
class XMLImporter:
def __init__(self, filename):
self.filename = filename
def execute(self):
print("XML imported from", self.filename)
class JSONImporter:
def __init__(self, filename):
self.filename = filename
def execute(self):
print("JSON imported from", self.filename)
class Document:
def import_file(self, filename):
if filename.endswith(".xml"):
importer = XMLImporter(filename)
elif filename.endswith(".json"):
importer = JSONImporter(filename)
data = importer.execute()
document = Document()
document.import_file("text.xml")
document.import_file("text.json")
На первый взгляд код рабочий, но здесь нарушаются два принципа SOLID:
Если появится новый формат (например, CSV), придётся снова лезть в метод import_file и расширять блок if / elif.
Решение: фабрика
Чтобы убрать ответственность за создание объектов из класса Document, вводится так называемася фабрика. Это объект, который берёт на себя ответственность за создание других объектов. Она не избавляет нас полностью от изменения кода при добавлении новых форматов, но значительно улучшает читаемость, гибкость и расширяемость системы.
class ImporterFactory:
def get_importer(self, filename):
if filename.endswith(".xml"):
return XMLImporter(filename)
elif filename.endswith(".json"):
return JSONImporter(filename)
Теперь
Document
больше не знает, как именно создаются нужные классы. Ему просто передают готовую фабрику:
class Document:
def __init__(self, factory):
self.factory = factory
def import_file(self, filename):
importer = self.factory.get_importer(filename)
data = importer.execute()
factory = ImporterFactory()
document = Document(factory)
document.import_file("text.xml")
document.import_file("text.json")
Преимущества фабрики
Что дальше?
Фабрика — это базовый паттерн. На его основе строятся более сложные подходы, например:
#основы
@zen_of_python
Please open Telegram to view this post
VIEW IN TELEGRAM
👎4🔥2❤1
typing-extensions | Машинка времени для фичей ЯП
Вечный участник рейтинга самых скачиваемых библиотек PyPi, модуль предоставляет дополнительные возможности для аннотаций типов, которые либо были добавлены в стандартный модуль
Тот случай, когда переходить на новую версию языкового пакета нет желания, а использовать новую фичу есть.
#инструмент
@zen_of_python
Вечный участник рейтинга самых скачиваемых библиотек PyPi, модуль предоставляет дополнительные возможности для аннотаций типов, которые либо были добавлены в стандартный модуль
typing
в более поздних версиях Python, либо являются экспериментальными и ещё не включены в стандарт. Тот случай, когда переходить на новую версию языкового пакета нет желания, а использовать новую фичу есть.
#инструмент
@zen_of_python
❤1
This media is not supported in your browser
VIEW IN TELEGRAM
leapcell.io | Деплой-сервис для вашего сайта / API
Аналог Heroku, система дарит возможность задеплоить до 20 проектов на JavaScript / Python / Go / Rust с 3-мя ядрами CPU на каждый из них. Дают одну сущность PostgreSQL. Как и во многих аналогичных деплой-сервисах, коннектится с вашим GitHub-аккаунтом и пуллит оттуда. Обещают отсутствие скрытых платежей за «выдающийся» трафик.
Доступен в РФ: да
Минимальная цена: есть Freemium
@prog_tools
Аналог Heroku, система дарит возможность задеплоить до 20 проектов на JavaScript / Python / Go / Rust с 3-мя ядрами CPU на каждый из них. Дают одну сущность PostgreSQL. Как и во многих аналогичных деплой-сервисах, коннектится с вашим GitHub-аккаунтом и пуллит оттуда. Обещают отсутствие скрытых платежей за «выдающийся» трафик.
Доступен в РФ: да
Минимальная цена: есть Freemium
@prog_tools
👍2✍1🗿1
Вышел Django 6.0 (альфа-версия)
17 сентября 2025 года команда Django представила шестую версию фреймворка. Это новый крупный релиз, в котором есть несколько фундаментальных улучшений.
Поддержка новых версий Python
🔘 Django 6 официально поддерживает Python 3.12 и 3.13;
🔘 Поддержка Python 3.10 и 3.11 прекращена.
Поддержка CSP
Content Security Policy (CSP) — это механизм безопасности веб-приложений, который через специальные HTTP-заголовки ограничивает, какие скрипты, стили и ресурсы может загружать и выполнять браузер, защищая от XSS и похожих атак.
Ранее для CSP приходилось ставить сторонние пакеты. Теперь же:
🔘 CSP встроен в ядро Django;
🔘 Поддерживаются nonce-атрибуты для защиты inline-скриптов;
🔘 Настройка выполняется через middleware и шаблонные процессоры;
Это сократит ваш requirements.txt и обеспечит больше безопасности «из коробки».
Фоновые задачи
Одно из самых ожидаемых нововведений: встроенная система фоновых задач. Новый декоратор
🔘 ImmediateBackend — выполняет задачу сразу (удобно для разработки)
🔘 DummyBackend — добавляет задачу в очередь, но не исполняет (для тестирования логики)
В будущем планируются интеграции с реальными брокерами (Postgres, Redis, RabbitMQ).
Template Partials: переиспользуемые компоненты
Фронтенд-разработчикам понравится. Новый механизм
🔘 Позволяет определять фрагменты шаблона через
🔘 Поддерживает параметры и повторное использование в циклах и разных местах страницы;
🔘 Устраняет дублирование кода, упрощает дизайн-системы на Django Templates.
Это шаг в сторону компонентного подхода, знакомого пользователям React / Vue, но в экосистеме Django.
Другие изменения
🔘 В циклах теперь можно использовать
🔘 Более корректная работа с Unicode, MIME-типами и вложениями в емейлах;
🔘 Обновления для PostgreSQL и других баз данных;
🔘 Традиционные улучшения производительности и совместимости;
🔘 Альфа-релиз означает feature freeze: новые возможности добавлены, впереди тестирование и исправление багов.
#факт
@zen_of_python
17 сентября 2025 года команда Django представила шестую версию фреймворка. Это новый крупный релиз, в котором есть несколько фундаментальных улучшений.
Поддержка новых версий Python
Поддержка CSP
Content Security Policy (CSP) — это механизм безопасности веб-приложений, который через специальные HTTP-заголовки ограничивает, какие скрипты, стили и ресурсы может загружать и выполнять браузер, защищая от XSS и похожих атак.
Ранее для CSP приходилось ставить сторонние пакеты. Теперь же:
Это сократит ваш requirements.txt и обеспечит больше безопасности «из коробки».
Фоновые задачи
Одно из самых ожидаемых нововведений: встроенная система фоновых задач. Новый декоратор
@task
позволяет превращать любую функцию в асинхронное задание.В будущем планируются интеграции с реальными брокерами (Postgres, Redis, RabbitMQ).
Template Partials: переиспользуемые компоненты
Фронтенд-разработчикам понравится. Новый механизм
partials
:partialdef
;Это шаг в сторону компонентного подхода, знакомого пользователям React / Vue, но в экосистеме Django.
Другие изменения
forloop.length
, чтобы узнать размер итерации (ранее были только forloop.counter
, forloop.first
, forloop.last
и т.п.)#факт
@zen_of_python
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8❤1
Что нового в Python 3.14: разбираем главные изменения
В статье на Tproger рассказали о ключевых нововведениях Python 3.14:
— t-строки (строки-шаблоны с префиксом
— отложенные аннотации типов, которые вычисляются только при первом доступе, что решает проблемы с циклическими импортами;
— новые методы pathlib (
#факт
@zen_of_python
В статье на Tproger рассказали о ключевых нововведениях Python 3.14:
— t-строки (строки-шаблоны с префиксом
t
), которые не вычисляются сразу, а дают разработчику контроль над подстановкой значений;— отложенные аннотации типов, которые вычисляются только при первом доступе, что решает проблемы с циклическими импортами;
— новые методы pathlib (
copy
, move
) и другие новшества.#факт
@zen_of_python
PEP 804 | Про разные зависимости в разных ОС
Новый Python Enhancement Proposal вводит механизм мэппинга внешних зависимостей для разных операционок.
Пример
Если пакет A требует внешнюю библиотеку
или
Дабы не делать пост уж слишком лонгридом, для просмотра схемы мэппинга переадресуем вас в соответствующий раздел PEP.
p.s. На изображении гипотетический мэппинг для conda-forge.
#факт
@zen_of_python
Новый Python Enhancement Proposal вводит механизм мэппинга внешних зависимостей для разных операционок.
Пример
Если пакет A требует внешнюю библиотеку
zlib
, в pyproject.toml
указывают, например, dep:generic/zlib
. С помощью маппингов можно получить, что на Debian это zlib1g-dev
, на Fedora — zlib-devel
, или в conda — zlib
. Инструмент выдаст команду в зависимости от текущей экосистемы:
sudo apt install zlib1g-dev
или
conda install zlib
Дабы не делать пост уж слишком лонгридом, для просмотра схемы мэппинга переадресуем вас в соответствующий раздел PEP.
p.s. На изображении гипотетический мэппинг для conda-forge.
#факт
@zen_of_python
❤4
SQLCheck | Оптимизируем запросы
Мало кто задумывается о затратности / оптимальности того или иного SQL-запроса при верстке. Скорее уж потом, когда приходят счета за облачную БД или прилетает от тимлида на код-ревью.
SQLCheck — статический анализатор, который автоматически выявляет распространённые антипаттерны (рекурсии, отсутствие первичного ключа, SELECT * и многие другие).
Доступен в РФ: да
Цена: бесплатно
@prog_tools
Мало кто задумывается о затратности / оптимальности того или иного SQL-запроса при верстке. Скорее уж потом, когда приходят счета за облачную БД или прилетает от тимлида на код-ревью.
SQLCheck — статический анализатор, который автоматически выявляет распространённые антипаттерны (рекурсии, отсутствие первичного ключа, SELECT * и многие другие).
Доступен в РФ: да
Цена: бесплатно
@prog_tools
👍3☃2
django-silk | Профилирование HTTP- и SQL-запросов
Инструмент «перехватывает» запросы и ответы, собирая детальную статистику:
— длительность выполнения;
— заголовки, тела запросов / ответов;
— таблицы-источники.
Также поддерживаются ручное профилирование блоков кода через декораторы и контекстные менеджеры, динамическое профилирование функций. Хороший способ найти узкие места производительности в вашем Django-проекте.
#инструмент
@zen_of_python
Инструмент «перехватывает» запросы и ответы, собирая детальную статистику:
— длительность выполнения;
— заголовки, тела запросов / ответов;
— таблицы-источники.
Также поддерживаются ручное профилирование блоков кода через декораторы и контекстные менеджеры, динамическое профилирование функций. Хороший способ найти узкие места производительности в вашем Django-проекте.
#инструмент
@zen_of_python
👍2🙈1
Вопросы подписчиков
Zen of Python поддерживает новоприбывших (и не только) в особой рубрике. Как это работает:
— Спрашивайте что угодно (в комментариях под этим постом), связанное с Python. Здесь нет плохих вопросов!
— Сообщество вас поддержит. Самые интересные вопросы мы разберём в отдельном посте.
#обсуждение
@zen_of_python
Zen of Python поддерживает новоприбывших (и не только) в особой рубрике. Как это работает:
— Спрашивайте что угодно (в комментариях под этим постом), связанное с Python. Здесь нет плохих вопросов!
— Сообщество вас поддержит. Самые интересные вопросы мы разберём в отдельном посте.
#обсуждение
@zen_of_python
👍2
Придумайте смешную подпись к фото, но так, чтобы это относилось к языку программирования Python.
#кек #обсуждение
@zen_of_python
#кек #обсуждение
@zen_of_python
😁4