위지원의 데이터 일기 🐈
Home
  • 분류 전체보기 (563)
    • ✎ 2025년 (4)
    • 2024년 (16)
    • 2023년 (6)
    • 2022년 (35)
      • Developement (22)
      • Error (9)
    • 2021년 (68)
      • ERROR (9)
      • 알고리즘 (11)
      • 개발공부 (21)
      • Data (15)
      • 21.下 (12)
    • 2020년 (164)
      • 코테 (84)
      • Development (29)
      • 정처기 (41)
    • 2019년 (27)
    • 2018년 (89)
      • English Speaking (8)
      • Error (12)
      • C, Java, FileSystem (13)
      • DataBase (15)
      • Java (2)
      • 지식 (16)
      • Go (3)
      • spark (9)
      • 영어 (5)
      • 알고리즘 (6)
    • 2017년 (143)
      • Error (17)
      • machine learning (16)
      • Spark (20)
      • Database (19)
      • Python (17)
      • Spring (9)
      • etc. (10)
      • 백준 (5)
      • Google Platform (12)
      • web Development (7)
      • Docker (3)
      • Linux (8)
Home
  • 분류 전체보기 (563)
    • ✎ 2025년 (4)
    • 2024년 (16)
    • 2023년 (6)
    • 2022년 (35)
      • Developement (22)
      • Error (9)
    • 2021년 (68)
      • ERROR (9)
      • 알고리즘 (11)
      • 개발공부 (21)
      • Data (15)
      • 21.下 (12)
    • 2020년 (164)
      • 코테 (84)
      • Development (29)
      • 정처기 (41)
    • 2019년 (27)
    • 2018년 (89)
      • English Speaking (8)
      • Error (12)
      • C, Java, FileSystem (13)
      • DataBase (15)
      • Java (2)
      • 지식 (16)
      • Go (3)
      • spark (9)
      • 영어 (5)
      • 알고리즘 (6)
    • 2017년 (143)
      • Error (17)
      • machine learning (16)
      • Spark (20)
      • Database (19)
      • Python (17)
      • Spring (9)
      • etc. (10)
      • 백준 (5)
      • Google Platform (12)
      • web Development (7)
      • Docker (3)
      • Linux (8)
블로그 내 검색
포트폴리오

위지원의 데이터 일기 🐈

데이터를 사랑하고 궁금해하는 기록쟁이입니다! 😉 Super Data Girl이 되는 그날까지🏃‍♀️ 화이팅!

  • 🖥 깃블로그
  • 🌍 위키원
  • 📑 내맘대로 스크랩
  • 💌 메일
  • 2021년/ERROR

    21/04/06 15:20:45 ERROR shuffle.RetryingBlockFetcher: Exception while beginning fetch of 1 outstanding blocks

    2021. 4. 6. 15:22

    by. 위지원

    pyspark 실행할 대 --master 설정을 해줘야한다... 하...

     / __/__  ___ _____/ /__
        _\ \/ _ \/ _ `/ __/  '_/
       /__ / .__/\_,_/_/ /_/\_\   version 3.1.1
          /_/
    
    Using Python version 3.8.1 (v3.8.1:1b293b6006, Dec 18 2019 14:08:53)
    Spark context Web UI available at http://jiwon.local:4042
    Spark context available as 'sc' (master = spark://jiwon.local:7077, app id = app-20210406152023-0003).
    SparkSession available as 'spark'.
    >>> numbers = sc.range(0, 1000000, 1, 2)
    >>> evens = numbers.filter(lambda x: x % 2)
    >>> listfelements = evens.collect()
    21/04/06 15:20:45 ERROR shuffle.RetryingBlockFetcher: Exception while beginning fetch of 1 outstanding blocks
    java.io.IOException: Failed to connect to /172.16.115.136:42373
    	at org.apache.spark.network.client.TransportClientFactory.createClient(TransportClientFactory.java:287)
    저작자표시

    '2021년 > ERROR' 카테고리의 다른 글

    No module named google  (0) 2021.06.10
    bigquery 에러  (0) 2021.06.02
    Exception: Python in worker has different version 3.6 than that in driver 3.8  (0) 2021.04.06
    [Hadoop Jps] namenode, datanode가 실행되지 않는다면?  (0) 2021.04.05
    conflicts with the name of an existing Python module and cannot be used as an app name. Please try another name  (0) 2021.03.26

    잠깐만요~! 읽으신김에 이런 글들은 어떠세요? 👀

    • No module named google 2021.06.10
    • bigquery 에러 2021.06.02
    • Exception: Python in worker has different version 3.6 than that in driver 3.8 2021.04.06
    • [Hadoop Jps] namenode, datanode가 실행되지 않는다면? 2021.04.05
    맨 위로
전체 글 보기
Tistory 로그인
Tistory 로그아웃
로그아웃 글쓰기 관리

열정! 열정! 열정! 🔥

Designed by Nana
블로그 이미지
위지원
데이터 엔지니어로 근무 중에 있으며 데이터와 관련된 일을 모두 좋아합니다!. 특히 ETL 부분에 관심이 가장 크며 데이터를 빛이나게 가공하는 일을 좋아한답니다 ✨

티스토리툴바

티스토리툴바