Prefect Reseñas y Detalles del Producto

Recientemente tuve la oportunidad de adoptar un patrón de orquestación ETL centrado en Prefect y tengo que decir que ha sido un cambio radical. Fue perfecto para nuestra situación, donde teníamos múltiples ubicaciones con diferentes configuraciones, pero queríamos un patrón común de registro y despliegue.

Lo que más me impresionó fue lo fácil de usar que es Prefect. Es mucho más sencillo en comparación con soluciones complejas como Argo Events, o productos relativamente maduros como Airflow. Si estás en el espacio de Python trabajando en ETL, deberías estar usando este producto.

Pero lo que realmente me emocionó fue la reciente introducción de la herramienta de IA de Prefect llamada Marvin. Es fantástica para pequeñas "funciones de IA" y nos permite aprovechar los resultados de chatGPT como un tipo de objeto estructurado. Esto ha añadido un nuevo nivel de eficiencia a nuestros procesos ETL, limpiando campos de texto libre en categorías estructuradas.

En general, puedo decir con confianza que Prefect ha superado nuestras expectativas. Ha sido muy fácil de usar y ha mejorado enormemente nuestro flujo de trabajo ETL. Lo recomiendo encarecidamente a cualquiera que necesite un orquestador ETL confiable. Reseña recopilada por y alojada en G2.com.

Ha habido varios cambios importantes introducidos en lanzamientos menores. Además, parece que han dejado de corregir silenciosamente errores relacionados con los "agentes" en favor del enfoque de "trabajadores". El hecho de que haya errores conocidos con los agentes que no se corregirán en favor de que el usuario adopte un patrón completamente nuevo resulta frustrante como cliente que paga. Reseña recopilada por y alojada en G2.com.

Usar Prefect ha transformado mi gestión de flujos de trabajo. Su modelo de ejecución híbrido ofrece una flexibilidad sin igual, permitiendo ejecuciones en sistemas locales o distribuidos. Aprecio particularmente la construcción dinámica de pipelines, que se ajusta en función de los resultados intermedios. El rico sistema de estados proporciona una visión detallada de la ejecución de tareas, y la API nativa de Python se integra perfectamente con mi stack existente. Además, el panel de control de la interfaz de usuario, Prefect Cloud, es un cambio radical para monitorear y visualizar las ejecuciones de flujos. Con sus características robustas y su activa comunidad de código abierto, Prefect es una herramienta esencial en mi conjunto de herramientas de datos. Reseña recopilada por y alojada en G2.com.

Configurar flujos en la nube se sentía intrincado, y dominar las herramientas de visualización en Prefect Cloud tomó tiempo. Ocasionalmente, sus vastas características eran abrumadoras, y las tuberías dinámicas, aunque innovadoras, a veces añadían complejidad. Reseña recopilada por y alojada en G2.com.

- Una plataforma de programación agradable que permite a nuestro departamento de Negocios aumentar su autonomía programando sus guiones para incrementar su productividad.

- Nos permite mantener el monitoreo de su programación con nuestro Centro de Excelencia de Flujos.

- Nuestros administradores pueden detectar fácilmente flujos con errores y corregirlos antes de que el departamento de Negocios se dé cuenta.

- Me gusta el soporte de incorporación para ayudarnos a personalizar nuestra configuración con AWS.

- El equipo de Prefect nos permite adaptar nuestra configuración con la nueva versión.

- Nos ayudó a personalizar el gráfico de helm para desplegar nuestra infraestructura con nuestro clúster de kubernetes en las instalaciones, de modo que podamos orquestar tanto en la nube como en las instalaciones. Reseña recopilada por y alojada en G2.com.

- La implementación puede ser un poco difícil dependiendo de las reglas de seguridad de tu empresa para abrir acceso con tu proveedor de nube (AWS en nuestro caso) Reseña recopilada por y alojada en G2.com.

Prefect es una herramienta de orquestación de nueva generación, diseñada para bases de datos en la nube. En su núcleo, está basada en Python, lo que la convierte en una herramienta muy flexible, estable y rentable para orquestar tus flujos de datos. Con Prefect de código abierto, puedes hacer magia con tus flujos de datos sin costo alguno. Ayuda a construir flujos de datos resilientes ejecutando los flujos en infraestructuras flexibles como procesos locales, Docker, Kubernetes, contenedores de AWS, Azure, etc. Tu código de Prefect permanece dentro de tu organización, solo los metadatos de ejecución de flujos se envían a la interfaz intuitiva de Prefect para obtener un mejor control y visibilidad sobre la ejecución de tu flujo de datos. Con Prefect, puedes construir flujos escalables, automatizados y resilientes utilizando características de retención de registros, reintentos de concurrencia y ejecución basada en RBAC. Reseña recopilada por y alojada en G2.com.

A veces faltan ejemplos/código de demostración al consultar la documentación de Prefect, pero espero que eso mejore con el tiempo. No hay inconveniente en usar Prefect si tienes experiencia en Python de tu lado. Reseña recopilada por y alojada en G2.com.

Prefect potencia a los científicos de datos para iterar en el desarrollo de código de producción más rápido y ofrece a los ingenieros flexibilidad y escalabilidad para alojarlo en múltiples lugares, incluyendo en las instalaciones y en la nube. Especialmente fácil de usar para los científicos de datos que utilizan los decoradores en comparación con la sintaxis engorrosa que necesita práctica como Airflow. Reseña recopilada por y alojada en G2.com.

La herramienta está en constante evolución, por lo que algunas de las características deseables no están disponibles y es necesario esperar a que se implementen. Reseña recopilada por y alojada en G2.com.

En general, aprecio la simplicidad que Prefect ofrece y lo recomiendo a todos los equipos de datos pequeños y medianos. Me permite escalar las canalizaciones de datos sin esfuerzo, asegurando que el enfoque completo esté en el código en sí. En el tiempo que he estado usando Prefect, ha madurado significativamente, la documentación está en un estado mucho mejor y actualmente es extremadamente útil. Los paquetes de código abierto junto con el sistema de 'bloques' me han ahorrado mucho tiempo (y proporcionan un flujo de trabajo local > producción muy fluido). Reseña recopilada por y alojada en G2.com.

No hay muchos, si es que hay alguno, aspectos negativos que decir sobre Prefect. Mi mayor molestia es potencialmente la dispersión de vistas algo poco útiles en la interfaz (aunque son flexibles, pero solo dame resúmenes y panorámicas primero por favor). Esto ha mejorado recientemente con la adición de una vista de "tablero", que proporciona estados de un vistazo. Aún no es perfecto, estoy seguro de que seguirán mejorando. Reseña recopilada por y alojada en G2.com.

Me gusta que el producto sea un código abierto y que te proporcionen un servicio (Cloud) que resuelve todo lo aburrido como IAM/RBAC por ti. Las APIs de flujos y tareas en Python son geniales. Sencillas de entender para los científicos de datos. Una de las mejores plataformas para ETL. Reseña recopilada por y alojada en G2.com.

Algunos de los conceptos son bastante complejos (bloque de infraestructura) y la documentación no los explica bien. Luego puedes encontrar videos oficiales de Prefect en YouTube que lo hacen mejor. Algunas de las soluciones son un poco deficientes/descuidadas una vez que realmente las usas. Por ejemplo, el trabajador de Prefect AWS que genera tareas ECS lo hará de una manera que desencadena la limitación de tasa de la API de AWS. Reseña recopilada por y alojada en G2.com.

Aceleró el lanzamiento de nuestro producto con capacidades de orquestación robustas y la capacidad de generar KPIs de primera calidad. Excelente para nuestra plataforma de servicios gestionados. Reseña recopilada por y alojada en G2.com.

El inconveniente es cuando los clientes quieren la misma funcionalidad e insisten en usar otras herramientas para la orquestación. Es posible, pero no tan eficiente ni robusto. Reseña recopilada por y alojada en G2.com.

Tiene una gran experiencia para desarrolladores: puedo desarrollar mis flujos de trabajo en un cuaderno de Jupyter (incluido Colab). Esto me permite hacer experimentos antes de mover el código que funciona en un script de Python. Los bloques de Prefect son otra gran característica que simplifica la separación de la configuración del código. Reseña recopilada por y alojada en G2.com.

Algunas abstracciones tienen fugas. He tenido algunos desafíos al configurar un grupo de empuje de cloud-run con acceso a bases de datos locales a través de un conector VPC sin servidor. La plantilla de trabajo tiene un problema que logré solucionar después de leer la documentación de la API REST de Cloud Run. Reseña recopilada por y alojada en G2.com.

Prefect fue fácil de configurar y operar. La documentación es clara, el equipo es muy servicial y se está moviendo en la dirección correcta. Como Científico de Datos, puedo centrarme en mejorar mis modelos y ajustar mi lógica de optimización. Prefect se encarga de los flujos de datos, entrenamiento e inferencia. Me notifican en caso de problemas. También me gusta que sea independiente del proveedor de la nube. Reseña recopilada por y alojada en G2.com.

Todavía es una herramienta más joven, que tuvo algunos cambios importantes y disruptivos durante el último año. Esto está causando bastante trabajo extra de desarrollo. Espero que hayan terminado con esos grandes cambios. Reseña recopilada por y alojada en G2.com.