본문 바로가기

전체 글

 (25)
[Spark] Mac에서 Pyspark 설치 및 환경 설정 24년 11월 기준 Mac 환경에서 pyspark 설치 및 환경 설정한 부분을 정리합니다.  1. Homebrew를 통해 설치하는 것이 가장 용이한 것 같습니다.2. Java 버전은 Spark 버전과 맞춰 설치하면 됩니다.3. 모든 설치 과정은 다른 블로그에도 자세히 나와 있습니다.본 글은 Pyspark 실행 시 발생하는 아래 에러에 대해서 기록합니다.  에러 메세지 : Service 'sparkDriver' could not bind on a random free port 1. Homebrewhomebrew를 통해서 필요한 것들을 모두 다운로드 하겠습니다.homebrew를 먼저 설치합니다. https://brew.sh/ko/ HomebrewThe Missing Package Manager for mac..
[F-Lab] F-Lab(에프랩) 데이터 엔지니어링 코스 1개월 후기 여러 차례 블로그 글을 꾸준히 작성하기를 시도했었지만 실패했습니다.특별한 경험이 없다는 핑계, 누구나 하는 공부의 흔적을 남기는 것이 의미가 있을까라는 생각 때문이었습니다. 학습한 내용을 자신의 생각이 드러나게 글을 남기는 것은 큰 의미가 있다 라는 유명하신 분들의 말씀도 보았고글도 써봐야 글솜씨가 늘어난다는 것도 알고 있지만 그럼에도 불구하고 공개된 공간에 글을 쓰는 것은 쉽지 않았습니다. 최근 이러한 생각들을 뒤엎을만한 특별한 경험이 생겼고 이를 계기로 긍정적인 변화를 해보려 글을 남깁니다.저의 솔직한 후기가 도움이 되길 바랍니다.멘토링을 신청하기 까지현재의 회사에서 2~3년을 다닌 이후 좋은 비즈니스 모델을 가진 회사로의 이직을 희망했었습니다.업무를 열심히 하며 현재 회사에서의 2년이 지난 시점에 ..
백준 알고리즘 유형/난이도 정리 보호되어 있는 글입니다.

티스토리툴바