Troubleshooting (Hadoop: Setting up a Single Node Cluster)

Local 에 SingleNodeCluster 로 하둡을 실행시 에러 발생

$ sbin/start-dfs.sh

첫번째 에러

• Operation Not Permitted Error
• Mac 에서의 권한 에러
• 해결방법
  • sshd-keygen-wrapper 의 Full Disk Access 설정
  • System Preference -> Setting -> Security & Privacy -> Privacy -> Full Disk Access
    

    

두번째 에러

• secondary namenode 에서 DNS 가 적절히 입력되지 않음

  $ Starting secondary namenodes \[XXX.XXX.XXX.XXX\]  
  $ XXX.XXX.XXX.XXX: ssh: Could not resolve hostname XXX.XXX.XXX.XXX: nodename nor servname provided, or not known  

• 해결방법
  • 시스템 DNS 를 8.8.8.8 (primary DNS server for Google DNS) 로 설정
  • System Preference -> Networking -> Advanced -> DNS -> DNS Servers 에 8.8.8.8 추가
    

    

REF
Hadoop: Setting up a Single Node Cluster
Receive Operation Not Permitted Error when starting HDFS
Hadoop on MAC pseudo node : nodename nor servname provided, or not known