플래티어 연구소 테크 블로그
    • 메뉴 닫기
    • 글작성
    • 방명록
    • 환경설정
      • 분류 전체보기 (479) N
        • Ai Word 사전 (0)
        • A.I.(인공지능) & M.L.(머신러닝) (96)
          • Development Environments (9)
          • A.I. Information (14)
          • Python (6)
          • transformers (13)
          • 머신러닝 (1)
          • 딥러닝 (4)
          • 신경망 이론 (5)
          • LLM (33)
          • Agent (4)
        • DevOps와 Infra (65)
          • DevOps 일반 (23)
          • Docker Container (3)
          • Linux (2)
          • AWS EKS (16)
          • AWS (6)
          • Kubernetes On Premise (13)
          • Security (1)
          • IDC 서버 (1)
        • 검색엔진 (8)
          • Elasticsearch (5)
          • Opensearch (3)
        • 빅데이터 (31)
          • Mongo DB (4)
          • Apache Nifi (21)
          • Scala (4)
          • Apache Spark (2)
        • 네트워크 (2)
          • SSL (2)
        • Quality Assurance (3)
          • E2E Test (3)
        • Backend(Framework) (42)
          • Java (2)
          • Spring (1)
          • Spring Boot Batch (3)
          • NestJS (9)
          • NestJS 개요(공식문서 번역) (20)
          • Cache (3)
          • Rust (4)
          • Go (0)
        • Frontend (Next.js Tailwind .. (52)
          • Frameworks (6)
          • Next.js (30)
          • Typescript (1)
          • Tailwind CSS (9)
          • React.js (4)
        • Next.js 개발 가이드 (42)
          • 01. Set up (7)
          • 02. 코딩 가이드 및 필수 패키지 (9)
          • 03. 퍼블 가이드 (3)
          • 04. Data fetching (2)
          • 05. State management (3)
          • 06. Learn Next.js 공식 가이드 (18)
        • Nuxt 공식문서 번역 (96)
          • 개요 (15)
          • Directories (23)
          • Components (12)
          • Composables (21)
          • Utils (25)
        • Nuxt 개발 가이드 (13)
          • 01. Set up (9)
          • 02. 코딩 가이드 및 필수 패키지 (0)
          • 03. 퍼블 가이드 (0)
          • 04. Data fetching (3)
          • 05. State management (1)
        • Tech 공유 세미나 - 2차 (13)
        • 기타 (15) N
          • IT기타 (7) N
          • story (5)
          • 문정역 여기어때 (2) N
    빅데이터/Apache Nifi

    Apache Nifi 프로세서

    주요 프로세서 ExecuteSQ ConvertRecord ConvertAvroToJSON JoltTransformJSON SplitAvro PutDatabaseRecord UpdateRecord InvokeHTTP 1. 주요 프로세서 ExecuteSQL 제공된 SQL 선택 쿼리를 실행합니다. 쿼리 결과는 Avro 형식으로 변환됩니다 ConvertRecord 구성된 레코드 리더 및 레코드 쓰기 컨트롤러 서비스를 사용하여 레코드를 한 데이터 형식에서 다른 데이터 형식으로 변환합니다. 판독기와 기록기는 일치하는 스키마로 구성되어야 합니다. 이는 스키마의 필드 이름이 동일해야 함을 의미합니다. ConvertAvroToJSON 바이너리 Avro 레코드를 JSON 객체로 변환합니다. 이 프로세서는 Avro 필드를 ..

    2023. 9. 3. 18:45 / Tech정또해방
    빅데이터/Apache Nifi

    Apache Nifi 실행

    실행 가이드 구동 로그인 웹 구성 Flow 실행 Flow 단위 실행 및 확인 1. Nifi 실행 가이드 💡 Nifi 설치는 이전 문서 [Nifi 설치하기] ← 링크를 참조 1.1. Nifi 구동 💡 Window 환경 설치한 NIFI의 홈 디렉토리에서 bin 폴더에 내에 있는 run-nifi.bat 파일을 실행하여 NIFI를 구동합니다 또한 구동 상태를 확인하기 위해 status-nifi.bat 배치 파일을 사용할 수 있습니다 run-nifi.bat // 실행 status-nifi.bat // 상태확인 1.2. Nifi 로그인 💡 도메인 : https://localhost:8443/nifi/login 페이지에 아래와 같이 뜬다면 [고급] 버튼을 눌러 localhost(안전하지 않음)(으)로를 눌러서 페이지..

    2023. 9. 1. 13:57 / Tech정또해방
    빅데이터/Apache Nifi

    Apache Nifi 란?

    아파치 나이파이 설명 소프트웨어 구성요소 나이파이 기능 나이파이 주요 구성요소 프로젝트에서의 구성 1. 아파치 나이파이 설명 아파치 나이파이는 아파치 소프트웨어 재단에서 관리하는 프로젝트로, 소프트웨어 시스템 간의 데이터 흐름을 자동화하기 위해 개발된 소프트웨어입니다. 이 소프트웨어의 설계는 흐름 기반 프로그래밍 모델을 기반으로 하며, 클러스터링, TLS 암호화를 사용한 보안, 확장성, 시각적으로 데이터 흐름을 모니터링하고 수정할 수 있는 포털과 같은 사용성 개선 기능을 포함하고 있습니다. 아파치 나이파이는 사용하기 쉽고 강력하며 신뢰할 수 있는 데이터 처리 및 배포 시스템으로 소개되고 있으며, 주요 역할은 다음과 같습니다. 소스 데이터베이스에서 관련 데이터 추출 분석에 더 적합한 형식으로 데이터 변환 ..

    2023. 8. 30. 17:53 / Tech정또해방
    빅데이터/Apache Nifi

    Apache Nifi 설치하기

    개요 설치 방법 실행 방법 접속 방법 기타 1. 개요 이 문서에서는 Windows에 Apache Nifi를 설치하는 방법을 안내합니다. 2. 설치방법 먼저, Apache Nifi의 공식 웹사이트인 https://nifi.apache.org/ 로 이동하여 작성일 기준으로 가장 최신 버전인 nifi-1.22.0-bin.zip 파일을 다운로드한 후 압축을 해제합니다 Downloads 3. 실행방법 1. 실행하기 전에 JAVA를 다운로드하고 JAVA_HOME 환경 변수를 설정해야 합니다. 2. Windows 환경에서는 nifi를 실행하기 위해 run-nifi.bat 배치 파일을 실행합니다. 3. NiFi를 sh로 실행하려면 반드시 NiFi (home) 루트 디렉토리에서 bin 폴더에 접근하여 sh를 실행해야 합..

    2023. 7. 24. 13:51 / Tech정또해방
    • «
    • 1
    • »

    전체 방문자

    오늘
    어제
    전체

    테크팀 개인 블로그

    정지민
    jeong
    손성준
    son
    김해수
    sunwater
    이다운
    koala
    채희철
    bburongE

    전체 카테고리

    • 분류 전체보기 (479) N
      • Ai Word 사전 (0)
      • A.I.(인공지능) & M.L.(머신러닝) (96)
        • Development Environments (9)
        • A.I. Information (14)
        • Python (6)
        • transformers (13)
        • 머신러닝 (1)
        • 딥러닝 (4)
        • 신경망 이론 (5)
        • LLM (33)
        • Agent (4)
      • DevOps와 Infra (65)
        • DevOps 일반 (23)
        • Docker Container (3)
        • Linux (2)
        • AWS EKS (16)
        • AWS (6)
        • Kubernetes On Premise (13)
        • Security (1)
        • IDC 서버 (1)
      • 검색엔진 (8)
        • Elasticsearch (5)
        • Opensearch (3)
      • 빅데이터 (31)
        • Mongo DB (4)
        • Apache Nifi (21)
        • Scala (4)
        • Apache Spark (2)
      • 네트워크 (2)
        • SSL (2)
      • Quality Assurance (3)
        • E2E Test (3)
      • Backend(Framework) (42)
        • Java (2)
        • Spring (1)
        • Spring Boot Batch (3)
        • NestJS (9)
        • NestJS 개요(공식문서 번역) (20)
        • Cache (3)
        • Rust (4)
        • Go (0)
      • Frontend (Next.js Tailwind .. (52)
        • Frameworks (6)
        • Next.js (30)
        • Typescript (1)
        • Tailwind CSS (9)
        • React.js (4)
      • Next.js 개발 가이드 (42)
        • 01. Set up (7)
        • 02. 코딩 가이드 및 필수 패키지 (9)
        • 03. 퍼블 가이드 (3)
        • 04. Data fetching (2)
        • 05. State management (3)
        • 06. Learn Next.js 공식 가이드 (18)
      • Nuxt 공식문서 번역 (96)
        • 개요 (15)
        • Directories (23)
        • Components (12)
        • Composables (21)
        • Utils (25)
      • Nuxt 개발 가이드 (13)
        • 01. Set up (9)
        • 02. 코딩 가이드 및 필수 패키지 (0)
        • 03. 퍼블 가이드 (0)
        • 04. Data fetching (3)
        • 05. State management (1)
      • Tech 공유 세미나 - 2차 (13)
      • 기타 (15) N
        • IT기타 (7) N
        • story (5)
        • 문정역 여기어때 (2) N

    블로그 인기글

    태그

    • #Ai
    • #LLM
    • #이벤트리스너
    • #venv
    • #HuggingFace
    • #Langchain
    • #deepseek
    • #nextjs
    • #나이파이
    • #파이썬
    • #아파치
    • #finetuning
    • #검색엔진
    • #플래티어
    • #Spring Boot Batch
    • #ElasticSearch
    • #pyTorch
    • #nifi
    • #GPU
    • #문제해결
    • #셀레니움
    • #fine-tuning
    • #python
    • #딥러닝
    • #AWS EKS
    • #langgraph
    • #React
    • #apach
    • #Lora
    • #adapter_model.bin
    MORE
    Powered by Privatenote Copyright © 플래티어 연구소 테크 블로그 All rights reserved. TistoryWhaleSkin3.4

    티스토리툴바