Más de lo que nunca quisiste aprender sobre JIT, guardas y especialización
Autor: Jesús Cea & Otros - Contacto: python2021@podcast.jcea.es
Fecha de grabación: 2020/12/15 - Duración: 01:42:06
Fecha de publicación: 2021/04/27
Palabras clave: Tertulia
Descarga el audio: M4A (26091642 bytes) - OPUS (13058689 bytes)
En lo que sigue, cuando se habla de CPython, se refiere al intérprete de referencia de Python, que está escrito en lenguaje C: https://www.python.org/downloads/.
Participantes:
Eduardo Castro, email: info@ecdesign.es. Conectando desde A Guarda.
Jesús Cea, email: jcea@jcea.es, twitter: @jcea, https://blog.jcea.es/, https://www.jcea.es/. Conectando desde Madrid.
Javier, conectando desde Madrid.
Víctor Ramírez, twitter: @virako, programador python y amante de vim, conectando desde Huelva.
Miguel Sánchez, email: msanchez@uninet.edu, conectando desde Canarias.
Audio editado por Pablo Gómez, twitter: @julebek.
La música de la entrada y la salida es "Lightning Bugs", de Jason Shaw. Publicada en https://audionautix.com/ con licencia - Creative Commons Attribution 4.0 International License.
__set_name__()
. PEP 487:
https://www.python.org/dev/peps/pep-0487/.Poder "echar atrás" fácil.
Acumular cambios pendientes es deuda técnica.
auditwheel: https://pypi.org/project/auditwheel/.
¿Generación de Wheels en Microsoft Windows?
Se puede usar la opción -use-deprecated=legacy-resolver
.
Esa opción se puede meter también en el fichero de configuración, para no tener que escribirlo en cada invocación.
Jesús Cea comete el pecado de meter paquetes Python en el sistema operativo.
Jesús lleva dos años dándole vueltas a esto: bpo35930: "Raising an exception raised in a "future" instance will create reference cycles": https://bugs.python.org/issue35930.
Explicación detallada del asunto.
Brainstorming.
Contador de referencias. Inmediato, pero no recoge ciclos.
Si se crean instancias y no se destruyen, se llama a un recolector "pesado" que también recoge ciclos.
Esto puede ser problemático al arrancar el programa, antes de que la creación/destrucción de objetos se "estabilice".
gc.disable()
:
https://docs.python.org/3/library/gc.html#gc.disable.
Jesús Cea "abusa" de los destructores y de que se ejecuten cuando él quiere. Lo práctico contra lo puro.
Jesús ofrece cervezas.
gc.collect()
:
https://docs.python.org/3/library/gc.html#gc.collect. Esto
sirve tanto para recoger los ciclos como para comprobar si
tu programa tiene ciclos de memoria o no.
Futures: https://docs.python.org/3/library/concurrent.futures.html.
Explorar un programa en producción.
Tracemalloc: https://docs.python.org/3/library/tracemalloc.html.
DTrace: http://dtrace.org/blogs/about/.
py-spy: https://pypi.org/project/py-spy/.
Pérdidas de memoria: Recordar lo hablado ya en tertulias anteriores.
jemalloc: http://jemalloc.net/.
MALLOC_PERTURB_
:
https://debarshiray.wordpress.com/2016/04/09/malloc_perturb_/.
ESP8266: https://en.wikipedia.org/wiki/ESP8266.
Bluetooth Low Energy: https://en.wikipedia.org/wiki/Bluetooth_Low_Energy.
¿Qué ventajas aporta usar Micropython?
Desperdicio de recursos materiales porque realmente sobran.
Python es mucho más lento que C y no digamos ensamblador.
Subinterpreters: PEP 554: https://www.python.org/dev/peps/pep-0554/.
Si los subintérpretes no compartiesen NADA, se podrían lanzar simultaneamente en varios núcleos de la CPU sin competir por un GIL https://en.wikipedia.org/wiki/Global_interpreter_lock único.
JIT: https://es.wikipedia.org/wiki/Compilaci%C3%B3n_en_tiempo_de_ejecuci%C3%B3n.
PYPY: https://www.pypy.org/.
Numba: https://numba.pydata.org/.
Cython: https://cython.org/.
Python es "potencialmente" muy dinámico, pero en la práctica los programas no lo son. Jesús pone varios ejemplos.
Conversación densa entre Jesús y Javier.
Guardas para comprobar que la especialización sigue siendo correcta. Por ejemplo, para los diccionarios: PEP 509 Add a private version to dict: https://www.python.org/dev/peps/pep-0509/
"Tipado" más estricto.
MYPY: http://mypy-lang.org/.
Pydantic: https://pydantic-docs.helpmanual.io/.
Comprobación de tipos en tiempo de ejecución.
Descubrimiento de tipos en tiempo de ejecución, proporcionando "especialización".
Eduardo Castro entra y simplifica la discusión.
Jesús explica qué hace "a+b" internamente.
Memoria transaccional: https://es.wikipedia.org/wiki/Memoria_transaccional.
(nota de Jesús Cea): Los sistemas de persistencia Python descritos en tertulias anteriores pueden considerarse casos de memoria transaccional... si somos flexibles.
"Colorear" objetos y que dos hilos no puedan acceder a objetos del mismo color simultaneamente o en transacciones concurrentes.
Jesús Cea lo ha intentado y se ha rendido.
Poder usar todos los núcleos de la CPU.
Dadle una pesada al bug bpo35930: "Raising an exception raised in a "future" instance will create reference cycles": https://bugs.python.org/issue35930.