본문 바로가기

IT Note

(186)
Kafka의 필요성: 분산 데이터 환경의 필수품 안녕하세요! 여립입니다!다들 2024년을 마무리하며 한해를 돌아보고 계실 것 같습니다. 저의 경우 올해 목표였던 기술 스터디를 완주할 수 있었습니다.마침 기술 스터디의 주제가 [실전 카프카 개발부터 운영까지]이기도 하고, 이전글인 데이터 매쉬에 이어 카프카를 소개하면 좋을 것 같아 간단한 정의부터 장단점, 그리고 사용 예시까지 정리해보았습니다.  1. 카프카가 무엇인가요?카프카(Kafka)! 세계적인 소설가 프란츠 카프카(Franz Kafka)의 이름으로부터 유래한 Apach Kafka는 오픈소스 데이터 스트리밍 플랫폼으로 대용랑, 대규모 데이터(메세지)를 빠르게 처리하는 목적으로 개발된 플랫폼입니다. 비즈니스 중심의 소셜 네트워킹 플랫폼인 LinkedIn에서 하루에 1조 4천억 건의 메세지를 처리하기 ..
국내 최초 CSAP SaaS 인증 공공솔루션 개발 네이버클라우드로 시작하기 (그런데 Redis를 곁들인..) PRE. 공공데이터의 힘바야흐로 학생때 프로젝트를 진행할때 무언가 공신력 있는 자료를 뽑아내려면 공공데이터를 활용하는 경우가 많았습니다. 데이터 아낌없이 퍼주는 공공데이터 포탈은 그야말로 데이터의 천국이었는데요. 공공솔루션 주제를 보고 오랜만에 들어가봤습니다. 흥미로운 건 공공데이터를 활용해서 3118개의 앱, 웹이 개발되었다는 것입니다. 공공데이터를 쓰면서 공공솔루션을 더 잘 개발하기 위해선 어떻게 해야할까요? Main1. 공공솔루션 관련 네이버 클라우드 기술이 있다?공공 시장 진출에 관심이 있는 솔루션 개발사들이라면, 보안 인증에 대한 비용과 복잡한 심사과정 등으로 어려움을 겪어본 적 있으실 텐데요. 좋은 소식이 도착했습니다. 네이버클라우드가 클라우드DB 상품 5종에 대해 국내 최초로 CSAP Saa..
Gartner 2025 Prediction Top 10 중 하나, 허위 정보(Disinformation) 톺아보기 안녕하세요, 에디터 푸린입니다!오늘은 짧게 준비한 아티클이고, 가트너에서 2025년 주목해야 하는 Top 10 Technology Prediction 중 하나인 허위 정보(Disinformation)에서 간단하게 알아보고 넘어가보려고 합니다.특히나 생성형 AI, 딥페이크(Deepfake) 등 기술의 발전이 우리에게 많은 영향과 도움을 주지만 각종 범죄에도 이용이 되며 Hallucination(환각) 이라는 단점 등이 존재하기 때문에 더더욱 허위 정보에 대해서 주의를 기울여야 하는 점이 Top 10으로 뽑히지 않았나 싶습니다.우선 가트너에서 선정한 Top 10 내용이 무엇인지 리스트를 보고 넘어가시죠!1. Agentic AI2. AI governance platforms3. Disinformation se..
Query Optimization (feat. watsonx.data) 원문 : 호롤리/Query Optimization (feat. watsonx.data)OverviewQuery Optimization의 개념과, IBM의 lakehouse 솔루션인 watsonx.data에서 어떻게 쿼리 최적화를 할 수 있는지 알아보도록 하겠습니다.EnvironmentOpenshift : 4.16.xCP4D : 5.0.3watsonx.data : 2.0.3 Query Optimization두 개의 쿼리가 항상 순서 상관없이 같은 튜플들을 반환한다면 그것은 동등하다고 볼 수 있습니다.예를 들어서 : Natural Join (join순서를 어떻게 하던 동일한 결과를 반환합니다.) Select 연산 (만약에 E1테이블에서만 select 조건에 부합하는 튜플들이 있다면 먼저 select를..
제 1회 2024년 당근 테크 밋업에 갔다온 후기 안녕하세요! 여립입니다. 연말에는 많은 개발자들이 가고싶어하는 테크컨퍼런스가 열리는데요, 신청하는 모든 컨퍼런스가 떨어지는 와중에 당근 테크 밋업에 다행히(?) 당첨되어 갔다오게 되었습니다! 이번 당근 테크는 코엑스 3층 컨퍼런스 홀에서 열렸고, 신청한 트랙만 입장할 수 있었습니다. 저는 트랙 C인 데이터/머신러닝 트랙을 신청했습니다 (오후에는 사람이 줄어 다른 트랙도 잠깐 들어가봤습니다 ㅎㅎ).(PS. 출근길 9호선 급행은 쉽지 않은 것 같습니다...)후기 시작합니다!첫타임은 네트워크 모임으로 시작하게 되었습니다. 당근 테크 밋업에서는 매 세션타임에 네트워크 모임도 함께 진행해 다양한 직군 혹은 팀에 대해 알아볼 수 있었는데요, 저는 마침 2개의 네트워크 모임 신청에 성공하게 되어 참여할 수 있었습니다..
호다닥 톺아보는 데이터저장소 친구들(feat. DB,DW,DL,LH) 원문) 호롤리/호다닥 톺아보는 데이터저장소 친구들(feat. DB,DW,DL,LH)Overview대충 개념정도만 알고 있었던 Database, Data Warehouse, Data Lake, Data Lakehouse....최근 접할 일이 많아져서 이참에 개념들을 쭉 정리해보고자 합니다. DataBaseConceptIT관련 일을 한다면 모를수가 없는 용어죠, 데이터 저장소입니다. DBMS(Database Management System)을 통해 관리&운영ex) MySQL, PostgreSQL, Oracle, Db2관계형 데이터베이스(RDBMS)에서는 table이라는 단위로 데이터가 저장되며 table은 row, column으로 구성 Transaction그래서 이 DB를 가지고 무엇을 할까요? ..
기업용 실시간 방송 서비스, 글로벌 1위 실시간 방송 송출 플랫폼으로! B2B 라이브 스트리밍 PRISM Live Studio PRE. 라이브 스트리밍의 시대 인터넷 방송에서는 오래전부터 실시간 스트리밍 서비스가 유행했었지만 지금은 기업내에서도 라이브 스트리밍을 통한 컨퍼런스, 프레젠테이션, 사내 미팅등이 유행하고 있습니다. 라이브 스트리밍은 마케팅, 고객 소통, 교육, 엔터테인먼트 등 다양한 분야에서 중요한 역할을 하고 있습니다. 비즈니스에서도 라이브 스트리밍 서비스를 적극적으로 활용해, 자사 제품을 홍보하거나 고객들과 더욱 가깝게 소통하는 등 라이브 스트리밍 서비스 시장의 규모는 점점 성장하고 있는 추세입니다.이러한 트렌드에 발맞춰 네이버클라우드에서 기업을 위한 맞춤형 라이브 스트리밍 솔루션을 선보이게 되었습니다. 글로벌 모바일 스트리밍 앱 1위 PRISM Live Studio와 기업 서비스 전문 네이버 클라우드 플랫폼의 만..
9월 개정된 전금법 시행, 선불업 감독 강화에 대처하는 방법: 네이버클라우드 선불업 등록 올인원 패키지 PRE. 선불업이 강화된 배경 2021년 머지포인트 사태 이후 선불전자지급업자(선불업)의 감독 강화와 등록 대상 확대를 골자로 하는 개정 전자금융거래법(전금법)이 2024년 9월 15일 시행을 앞두고 있습니다.선불업을 영위하고 있거나, 선불업 진출을 고려하고 있다면 이번 개정안에 대한 충분한 이해와 대응이 필요합니다.이번 포스팅에서는 전금법 개정안의 주요 내용과 선불업 등록을 위해 준비해야 할 사항, 그리고 네이버클라우드의 선불업 등록 All-in-One 패키지를 소개해 드리겠습니다. ’24년 9월 개정 전자금융거래법이 시행됨에따라 선불업 등록 대상기업은 ’25년 3월까지 선불업을 등록할 의무가 있습니다.  1.선불업 감독대상 확대 및 등록 면제기준 강화•기존에는 업종 2개 이상, 가맹점수 10개 이상인..
게임회사는 동시접속자를 어떻게 관리할까? (Feat. 네이버 클라우드) 안녕하세요, 모두 체인쏘우! PRE. 게임 산업 빠르게 찍어먹기저는 게임을 많이 좋아합니다.롤도 좋아하고 스팀게임도 좋아하고 모바일게임도 좋아합니다. 중학교 때부터 게임을 정말 좋아했는데 그때는 유명한 멀티플레이 게임에서 심심치 않게 들려왔던말이 있습니다.아, 서버 터졌다 서버가 폭탄도 아니고 뭐 맨날 허다하게 터졌을까..하며 화를 냈던 기억이 새록새록합니다. 게임업계에 대해 이해도 낮기에 생성형 AI로 게임업계가 많은 트래픽을 어떻게 관리하는지에 대해 찾아보았습니다.솔직하게 OpenAI와 클로바X 2곳에 물어봤습니다.  2개를 읽어보면 공통적으로 등장하는 말들이 클라우드 컴퓨팅 기술입니다. PUBG의 배틀그라운드처럼 동시접속자가 330만명이 될수도 있고SXXX의 ConXXXX처럼 동시접속자가 600명이..
핀테크 기업 혁신의 시작 | 금융 AI까지 한 번에~ (Feat, 네이버클라우드, 선불업클라우드) 안녕하세요 전기톱맨입니다. 오늘은 핀테크에 대해 알아보겠습니다. PRE. FINTECH가 뭔데? 핀테크는 금융에 IT기술을 결합하여 복잡하고 어려웠던 금융을 효율적으로 편리하게 서비스하는 것을 의미합니다.페이팔, 토스, 카카오페이, 페이코와 같은 기업들이 이런 핀테크 기업이라 할 수 있습니다. Main 1. FINTECH, 너네도 클라우드 써야겠지? 클라우드 도입에 대한 관심이 증가하면서, 핀테크 기업들의 클라우드 도입이 가속화되고 있습니다. 핀테크 업계에서 클라우드를 도입할 때에는 아무래도 서비스 안정성과 보안성이 최우선으로 고려될 듯 합니다. 핀테크 기업은 민감한 금융 데이터를 다루는 만큼 반드시 일반 클라우드가 아닌, 금융 전용 클라우드를 도입해야 하는데요. 본 포스팅에서는 핀테크 기업이 어떤 클라..
생성형 AI 개발 정상화해줬잖아 개발까지 다 해줬잖아 (Feat 클로바 스튜디오) 안녕하세요 전기톱맨입니다.오늘은 생성형 AI 개발도구 클로바 스튜디오에 대해 알아보겠습니다.PRE. 생성형 AI 찍어먹어보기시간 없으니 빠르게 살펴보겠습니다. 생성형 AI 관련 제가 이전 포스팅에서 정리한게 있기에 가져와봤습니다. https://it-ist.tistory.com/315 생성형 AI? 직접 써볼게요. (Chatgpt, Autogpt, HyperClova X, WatsonX, Midjourney, RVC Crepe V3)2023년은 생성형 AI의 시대라고 해도 과언이 아닙니다. Chatgpt를 필두로 여기저기서 AI, AI, AI에 대해 외치고 있습니다. 이런 적은 처음이 아닙니다. 1. 이제는 볼드모트가 된 그 이름 2018년을 기억하it-ist.tistory.com 생성형 AI 대란의 시..
금융 클라우드, 자 드가자~ (Feat. Naver Cloud) 안녕하세요 전기톱맨입니다.한 해의 4분의 3이 지나갔습니다.오늘은 금융 클라우드에 대해 알아보고 현 시장이 어떻게 흘러가는지 한번 보겠습니다.클라우드 도입에 대한 관심이 증가하면서, 금융권에서도 클라우드 도입 열풍이 불고 있습니다. 금융권 클라우드 도입은 ‘왜’가 아닌 ‘언제’라는 말이 나올 만큼, 필수가 되었는데요. 실제로 신한금융그룹과 KB국민은행 등 주요 금융사도 이미 클라우드를 도입하여 활용하고 있습니다.다만 민감한 금융 데이터가 유출될 수 있다는 이유로, 도입을 주저하는 금융 기업들도 있는데요. 그렇다면 금융기관이 어떤 클라우드를 선택해야 하는지, 또 어떻게 활용할 수 있을지 알아보겠습니다. PRE. On-Prem VS Cloud일단 대부분은 알겠지만 클라우드라는 용어를 정립하고 가보겠습니다. ..