블로그 이미지
평범하게 살고 싶은 월급쟁이 기술적인 토론 환영합니다.같이 이야기 하고 싶으시면 부담 말고 연락주세요:이메일-bwcho75골뱅이지메일 닷컴. 조대협


Archive»


 

'Scala'에 해당되는 글 1

  1. 2015.06.09 Apache Spark-Python vs Scala 성능 비교 (1)
 

스파크 성능이 안나오면, 우리 회사 데이타팀 팀장왈. 먼저 파이썬으로 짰는지 확인 부터 해보라길래, 파이썬과 스칼라로 만들어진 스파크 성능 차이가 얼마나 나는지 찾아봤더니 다음과 같은 수치가 나왔다.


http://emptypipes.org/2015/01/17/python-vs-scala-vs-spark/ (원본 출처)


일단 스파크를 할려면 스칼라는 필수인듯 하다. 

간단한 프로토타입핑등에는 파이썬을 사용할 수 있겠지만 결국 프로적션은 스칼라로 최적화해야 할듯.

근데. 자바대 스칼라 성능 비교는 없네

본인은 구글 클라우드의 직원이며, 이 블로그에 있는 모든 글은 회사와 관계 없는 개인의 의견임을 알립니다.

댓글을 달아 주세요

  1. kahn 2015.09.09 11:59  댓글주소  수정/삭제  댓글쓰기

    원본 글의 본래 의도는, core 갯수가 작을 때는 scala 가 빠르지만 많을 때는 python을 써도 무방하다! 라는 거였어요 :)
    다만 작성자도 말했듯이 data size가 작아 엄밀하다고는 볼 수 없을 듯 하지만 참고용으로 쓸 수 있을 거 같아요!