욱이의 IT 생존일지

  • 홈
  • 태그
  • GitHub
  • Linkedin

2022/08 1

[Hadoop] WebHDFS와 HttpFS는 무엇이 다른걸까?

Intro 얼마전, 회사에서 MLE 분이 HDFS에서 뭔가 다운로드 받고 싶으시다고 WebHDFS 경로를 문의주셨습니다. 그런데 저희 시니어 팀원 분께서 WebHDFS가 아닌 HttpFS를 쓰시도록 권고를 해주시길래, 어떤 차이가 있는걸까.. 생각해보게 되었습니다. 단순한 궁금증이긴 하지만, 이번 기회에 정리해보고자 합니다. WebHDFS와 HttpFS. 과연 무엇이 다른걸까요? WebHDFS WebHDFS는 HDFS 클라이언트가 Hadoop 바이너리를 설치하지 않더라도, 다양한 언어에서 HDFS에 접근할 수 있도록 REST 형태로 개발된 API입니다. Hortonworks에서 개발했으며, Hadoop 에코시스템 외부에서 동작하는 애플리케이션이 HDFS에 무언가 생성하고 쓰고, 변경하는 작업을 허용해줍니..

IT/Hadoop 2022.08.07
1
더보기
프로필사진

Go언어와 Kubernetes를 좋아하는 엔지니어입니다. 꾸준히 배웁니다.

  • 전체 보기 (161)
    • PS (20)
      • BOJ (20)
    • IT (127)
      • Hadoop (1)
      • Airflow (7)
      • DevOps (6)
      • IT WIKI (25)
      • Network (16)
      • Kubernetes (18)
      • Docker (1)
      • containerd (2)
      • Istio (1)
      • Go (19)
      • OpenSource (1)
      • Python (5)
      • C++ (3)
      • OpenStack (6)
      • OS (10)
      • SQL (1)
      • Coding Tip (4)
    • 욱이야기 (7)
      • 욱이 취업 (1)
      • 욱이 (6)
    • Apple (7)
      • Mac (7)
      • iPhone & iPad & Acc (0)

최근글

  • [Wookiist] 글또 7기 활동을 회고해보자 2022.10.15 12:34
  • [Airflow] Airflow 2.4.0에선 무엇이 달라졌을까? 2022.10.15 12:09
  • [Airflow] Backfill과 Clear를 정리해보자 2022.09.18 12:14

인기글

  • [Linux/Unix] Shell Script에서 날짜/시간 변수 사용하기 2021.03.22 10:04
  • [GCC/G++] vi 또는 vim에서 전체 코드 자동 정렬하는 단축키 2016.09.05 10:38
  • [Kubernetes] 깔끔하게 kubeadm reset 하기 2021.06.22 00:10

Tag

Container, go언어, 네트워크, Kubernetes, 고랭, linux, docker, 쿠버네티스, 고언어, 도커, 고, BOJ, k8s, 컨테이너, Golang, Go, 백준, 리눅스, Network, Coding Test,

최근댓글

  • ㅋㅋ 또 도움받네여 kubeadm certs check-expiration kubead⋯

    김학건

  • 안녕하세요. helm create를 해보셨다면 아시겠지만, 몇몇 필요한 템플릿은 샘플로 ⋯

    wookiist

  • value.yaml로 뺄 파라미터들과 deployment, pod등 각종 yaml temp⋯

    odark

Archives

  • 2022/10
  • 2022/09
  • 2022/08
  • 2022/07

Calendar

«   2022/08   »
일 월 화 수 목 금 토
1 2 3 4 5 6
7 8 9 10 11 12 13
14 15 16 17 18 19 20
21 22 23 24 25 26 27
28 29 30 31

방문자수Total

315,763

  • Today : 123
  • Yesterday : 395

Copyright © Kakao Corp. All rights reserved.

  • Wookiist GitHub
  • Wookiist Linkedin

티스토리툴바