Полное руководство параллельного программирования на python куан нгуен pdf

Манифест

1. Учиться нужно асинхронно: в работу нужно брать не огромную тему (например изучить весь Python или теорию баз данных),
   а набирать из разных направлений понемногу маленьких тем / вопросов в проработку: чуть-чуть из Python, чуть-чуть из
   SQL и так далее.
2. Обязательно освоить работу с Git, Debugger и научиться писать простейшие тесты.
3. Заниматься регулярно!
4. Решать (или пытаться решить) в день хотя бы 1 задачку с leetcode или аналогичного сайта.
5. Соблюдать режим труда и отдыха.
6. Не бояться просить помощи во всех доступных источниках, если пришлось столкнуться с проблемой, которую не получается
   решить за вменяемое время.

Избранные статьи на Хабр

• Почему твоя мама ещё не прогает? — Хабр
• Хватит клепать псевдопрограммистов, или «Горшочек — не в IT!» — Хабр
• Генераторы для самых маленьких — Хабр
• Введение в асинхронное программирование на Python — Хабр
• Асинхронный Python: различные формы конкурентности — Хабр
• Типовые ошибки Python-разработчиков на собеседованиях — Хабр
• Как работает память в Python — Хабр
• Рецепт полезного код-ревью от разработчика из Яндекса — Хабр
• Как устроен GIL? — Хабр
• Действительно ли Python GIL уже мёртв? — Хабр

Переводы на Хабр по технологиям

• Pytest — Хабр
• RabbitMQ — Хабр
• Docker — Хабр

Избранные курсы

• Погружение в Python — https://ru.coursera.org/learn/diving-in-python
• SQL — https://www.coursera.org/specializations/learn-sql-basics-data-science
• Postgresql — https://www.udemy.com/course/bestpostgres/
• Advanced Python — https://www.pluralsight.com/courses/advanced-python
• Канал про Python высокого качества — https://www.pluralsight.com/authors/robert-smallshire
• Elasticsearch — https://www.udemy.com/course/elasticsearch-complete-guide/

Избранные книги

• Ч.Петцольд — Код. Тайный язык информатики — базовая книга для понимания того, как работают компьютеры.
• М.Лутц — Изучаем Python (2 тома) — базовые книги по Python
• М.Лутц — Программирование на Python — читать только после базовых томов
• А.Бхаргава — Грокаем алгоритмы — базовая книга по алгоритмам и структурам данных
• А.Швец — Погружение в паттерны проектирования — базовая книга по паттернам для новичков. Читать только после книг по алгоритмам и программированию.
• Л.Ромальо — Python. К вершинам мастерства — читать только после книг по программированию.
• С.Дасгупта, Х.Пападимитриу, У.Вазирани — Алгоритмы — жёсткая книга про алгоритмы, но очень крутая. Читать только после всего остального.
• Python для сетевых инженеров — Документация Python для сетевых инженеров 3.0
• Э.Шоу — Внутреннее устройство CPython
• К. Нгуен — Полное руководство параллельного программирования на Python http://onreader.mdl.ru/MasteringConcurrencyInPython/content/index.html
• Д.Хеллман — Стандартная библиотека Python

Избранные видео

• А. Кузьмин — Память и Python https://www.youtube.com/watch?v=D0vbuIDOV4c

Избранные сайты для решения задач

• https://codeforces.com/
• https://codewars.com/
• https://leetcode.com/

Вопросы, часто встречающиеся на собеседованиях

1. Что такое интерпретируемый язык? Что такое интерпретатор и как он работает в Python?
2. Что такое статическая и динамическая типизация и в чем это проявляется в Python?
3. Какие типы данных в Python вам известны?
4. Чем кортеж отличается от списка?
5. В каких случаях лучше использовать кортеж, а в каких — список?
6. Как вы объясните человеку, что такое множество?
7. Что такое словари и как они работают?
8. Как работают типы данных хэшмап, связанный список, двусвязный список, массив?
9. Что такое О (о-большое)? Зачем и как используется?
10. Какая сложность вставки, извлечения, поиска элементов в словаре и списке?
11. Что такое функции и зачем они нужны?
12. Какие бывают аргументы у функций?
13. Что такое распаковка коллекций?
14. Что такое исключения? Какие они бывают? Как их использовать?
15. Что такое ООП? На каких концепциях стоит ООП?
16. Объяснить понятие класса и объекта (экземпляра).
17. Что такое инкапсуляция? Накодить пример.
18. Что такое наследование? Накодить пример.
19. Бывает ли в Python множественное наследование? Как ты относишься к этому факту?
20. Если у нескольких классов-родителей есть методы с одинаковыми названиями, то какой из них будет вызван в наследнике?
21. Что такое полиморфизм? Накодить пример.
22. Что такое staticmethod?
23. Чем staticmethod отличается от простой функции?
24. Когда будем использовать staticmethod, а когда простую функцию?
25. Что такое classmethod? В чём его особенности? Когда применяется?
26. Что такое магические методы и за что они отвечают?
27. Что такое конструктор объектов в Python и из чего он состоит и как работает?
28. Почему в методе init есть аргумент self?
29. Что такое приватные и защищенные атрибуты? Как они работают?
30. Можно ли получить доступ к приватным атрибутам в Python?
31. Что такое менеджер контекста, зачем он нужен?
32. Какие способы конкурентного выполнения программ в Python бывают?
33. Что такое GIL и как он работает?
34. В каких случаях GIL не работает?
35. Что такое сборщик мусора и как он работает?
36. Что такое потоки и процессы? Чем отличается поток от процесса?
37. Что такое системный вызов fork?
38. Какие существуют способы синхронизации процессов и потоков?
39. Как передавать информацию из одного процесса в другой?
40. Что такое эффект гонок? Как с ним бороться?
41. Что такое асинхронность?
42. Что такое event loop и как он работает?
43. Сколько потоков и процессов работает во время асинхронного выполнения кода?
44. Для каких задач стоит использовать потоки, для каких — процессы, а для каких — асинхронность?

Git

1. Что это такое и зачем он нужен?
2. Что такое local и remote репозитории?
3. Что такое commit?
4. Что такое ветка?
5. Что такое pull-request / merge-request?
6. Что такое merge?
7. Что такое rebase?
8. Что такое pull?
9. Чем rebase отличается от merge?
10. Что такое конфликты? Почему они возникают и как их разрешать?
11. Уметь пользоваться командами: clone, commit, push, pull, merge, rebase

Docker

1. Что такое контейнеризация? Зачем она нужна?
2. Чем контейнер отличается от виртуальной машины?
3. Что такое образ?
4. Что такое том?
5. Что такое сеть контейнера?
6. Какие виды сетей бывают?
7. Зачем нужен docker-compose?

Базы данных

1. Что такое базы данных и для чего они нужны?
2. Какие типы баз данных бывают?
3. Чем РСУБД отличаются от NoSQL БД?
4. Какие достоинства и недостатки есть у РСУБД и NoSQL?
5. Приведите примеры РСУБД и NoSQL БД.
6. Что такое BASE и ACID?
7. Как понять, какую базу данных нужно использовать в проекте?
8. Что такое индексы? Зачем они нужны? Как они работают?
9. Какие популярные виды индексов существуют?
10. Что такое транзакции? Зачем они нужны?
11. Какие виды изолирования транзакций бывают?
12. Что такое профилирование запросов?

SQL

1. Что такое JOIN’ы и какие они бывают?
2. Что такое оконные функции и как они работают?

Backend

1. Что такое протокол передачи данных?
2. Что такое HTTP? Чем отличается HTTPS?
3. Какие другие протоколы передачи данных, кроме HTTP(S) вы знаете? Как они работают?
4. Что такое API?
5. Что такое REST и RESTfull API?

Тестирование

1. Что такое тестирование и зачем оно нужно?
2. Какие виды тестов вы знаете? Что каждый из видов тестов подразумевает под собой?
3. Какие библиотеки для написания тестов используются?
4. Что такое фикстура в pytest?

Кодинг:

1. Написать пример произвольного менеджера контекста.
2. Реализовать паттерн проектирования синглтон.
3. Реализовать паттерн проектирования декоратор.
4. Решить несколько задач.Уметь оценить алгоритмическую сложность решения.

Задача на временные метки

Есть список событий:

[
            {
                "dt": "2022-02-23 04:35:27.353366",
                "event": "start"
            },
            {
                "dt": "2022-02-23 04:35:34.654153",
                "event": "stop"
            },
            {
                "dt": "2022-02-23 04:38:34.382548",
                "event": "start"
            },
            {
                "dt": "2022-02-23 04:38:39.637583",
                "event": "stop"
            }
]

В этом списке последовательно лежат события типа START и STOP, а также их временные метки. События лежат
последовательно: после START всегда идёт STOP и наоборот. Задача:

1. Написать функцию, которая возвращает количество часов, выпадающее на промежуток соответствующих событий
   START — STOP за указанную дату.
2. Возвращать количество часов за диапазон дат.
3. Возвращать количество часов за текущий день, неделю, месяц, год.

Python Parallel Programming Cookbook — Second Edition

This is the code repository for Python Parallel Programming Cookbook — Second Edition , published by Packt.

Over 70 recipes to solve challenges in multithreading and distributed system with Python 3

What is this book about?

Nowadays, it has become extremely important for programmers to understand the link between the software and the parallel nature of their hardware so that their programs run efficiently on computer architectures. Applications based on parallel programming are fast, robust, and easily scalable.

This book covers the following exciting features:

• Synchronize multiple threads and processes to manage parallel tasks
• Use message passing techniques to establish communication between processes to build parallel applications
• Program your own GPU cards to address complex problems
• Manage computing entities to execute distributed computational task
• Write efficient programs by adopting the event-driven programming model
• Explore cloud technology with Django and Google App Engine
• Apply parallel programming techniques that can lead to performance improvements

If you feel this book is for you, get your copy today!

Instructions and Navigations

All of the code is organized into folders. For example, Chapter02.

The code will look like the following:

class Pdb_test(object):
    def __init__(self, parameter):
    self.counter = parameter

Following is what you need for this book:
The Python Parallel Programming Cookbook is for software developers who are well-versed with Python and want to use parallel programming techniques to write powerful and efficient code. This book will help you master the basics and the advanced of parallel computing.

With the following software and hardware list you can run all code files present in the book (Chapter 01-09).

Software and Hardware List

We also provide a PDF file that has color images of the screenshots/diagrams used in this book. Click here to download it.

Related products

• Mastering GUI Programming with Python [Packt] [Amazon]

• Expert Python Programming — Third Edition [Packt] [Amazon]

Get to Know the Author

Giancarlo Zaccone
Giancarlo Zaccone has over fifteen years’ experience of managing research projects in the scientific and industrial domains. He is a software and systems engineer at the European Space Agency (ESTEC), where he mainly deals with the cybersecurity of satellite navigation systems.

Giancarlo holds a master’s degree in physics and an advanced master’s degree in scientific computing.

Giancarlo has already authored the following titles, available from Packt: Python Parallel Programming Cookbook (First Edition), Getting Started with TensorFlow, Deep Learning with TensorFlow (First Edition), and Deep Learning with TensorFlow (Second Edition).

Other books by the authors

Python Parallel Programming Cookbook

Suggestions and Feedback

Click here if you have any feedback or suggestions.