近年來Python逐漸成為越來越受歡迎的開發語言之一，在開源網站GitHub統計中，Python一舉奪下了第一名的寶座。目前Python大量的被運用在各個領域之中，舉凡大數據處理、網站開發、視窗程式設計等都可以看到Python的影子，而各大公司如Google、YouTube、Yahoo以及NASA也都是使用Python作為主要開發的語言。除此之外，簡單、易學也是讓Python能夠如此流行的原因之一。 Apache Spark是一個高效率的開源叢集運算框架，比起先前Hadoop的MapReduce，在運算效率上要快上百倍，透過PySpark讓我們能夠藉由Python程式語言直接操作Spark上的叢集資源進行運算。