Spark On AWS Lambda
Spark runtime on AWS Lambda
About
Le cadre Apache Spark on AWS Lambda (SoAL) est une installation autonome de Spark fonctionnant sur AWS Lambda. Spark est emballé dans un conteneur Docker, et AWS Lambda est utilisé pour exécuter l'image Spark. L'image Spark intègre un script PySpark. Lors du traitement de fichiers plus petits de moins de 500 Mo par charge utile, certains services basés sur un cluster entraînent des coûts de démarrage de la JVM. Cette stratégie basée sur des conteneurs réduit les coûts généraux associés à la mise en route de nombreux nœuds tout en traitant les données sur un seul nœud. Utilise le cadre SoAL pour des pipelines basés sur des événements avec des fichiers plus petits si tu recherches une option moins coûteuse, selon les clients.
Open Source Health
- Stars
- 113
- Forks
- 39
- License
- MIT-0
- Last commit
- 1 years ago
Alternatives à Spark On AWS Lambda
Stliteby Yuichiro Tachibana (Tsuchiya)Streamlit-Lite; In-browser Streamlit 🎈🚀- Ecommerce Netlifyby Sarah Drasner🛍 Un site Ecommerce JAMstack construit avec Nuxt et Netlify Functions.
Serverlessby ServerlessServerless Framework – Créez facilement des applications qui s'adaptent automatiquement, n'engendrent aucun coût lorsqu'elles sont inactives et nécessitent peu de maintenance en utilisant AWS Lambda et d'autres services cloud gérés.- Serverless-for-Iranby patternihaAccès direct et sans intermédiaire à Internet libre.
Github Readme Statsby Anurag Hazra:zap: Statistiques générées dynamiquement pour vos readmes GitHub
Resources & Links
Related Categories
Tu utilises Spark On AWS Lambda ?
Suis son coût avec le reste de ton stack et reçois un rappel avant son renouvellement.
Ajouter à mon stackVendor
Aws Samples
Publisher of IAM Identity Center Team, Serverless Patterns and Siem On Amazon Opensearch Service
