pyspark 에러

1. AttributeError: 'DataFrame' object has no attribute 'values'

https://stackoverflow.com/questions/38610559/convert-spark-dataframe-column-to-python-list

Convert spark DataFrame column to python list

2. TypeError: expected string or bytes-like object

 

분명 내가 찍어봤을땐, type이 list였는데 혹시 아닌것이 있을까봐 모든 list안의 값들을 str()을 적용해 주었다.

그랬더니 해결! 내 경우에 이 에러는 어떤 것이 str이 아닌데 str처럼 쓸때 발생하는 것 같다.

 

3. ModuleNotFoundError: No module named 'selenium'

--> pip install selenium