본문 바로가기

Security & IT terms113

[Day 214] 데이터 사일로(silo) 데이터 사일로(Silo, 부서간 소통 단절) 데이터가 전체적으로 통합되지 않고 개별 부서나 사업 부문별로 고립적으로 활용되는 현상 데이터 사일로를 제거하면 적절한 결정을 내릴 수 있도록 적시에 올바른 정보를 얻을 수 있고, 또한 중복 정보에 대한 저장 비용을 절감할 수 있음 데이터 사일로의 문제점 데이터의 포괄적인 인사이트를 볼 수 없음 데이터가 격리되면 격리된 데이터 간의 관련성을 놓치게 됨 예를 들어 마케팅팀은 특정 지역에서 큰 관심을 끌었던 캠페인에 대한 데이터를 가지고 있고, 영업팀은 동일한 역에서 영업에 대한 정보를 가지고 있을 때, 데이터 통합이 안되어 있으면 인사이트 기반의 의사결정이 어려워짐 리소스 낭비 마케팅팀과 영업팀에서 각각 고객정보 데이터베이스를 관리할 경우, 데이터 관리 비용이 낭.. 2021. 3. 11.
[Day 213] ELK ELK 오픈소스 프로젝트인 Elasticsearch, Logstash. Kibana 의 머리글자를 합친 것 Elasticsearch : 검색 및 분석 엔진 Logstash : 여러 소스에서 동시에 데이터를 수집하여 변환한 후 Elasticsearch 같은 “stash”로 전송하는 서버 사이드 데이터 처리 파이프라인 Kibana : 사용자가 Elasticsearch에서 차트와 그래프를 이용해 데이터를 시각화할 수 있게 해줌 * 출처 ELK Stack: Elasticsearch, Logstash, Kibana | Elastic ELK Stack: Elasticsearch, Logstash, Kibana ELK Stack이란 무엇인가요? ELK Stack은 널리 알려진 세 개의 오픈 소스 프로젝트인 E=Ela.. 2021. 3. 10.
[Day 211] Verification(확인), Validation(검증) Verification(확인) Are we building the product right? (우리가 제품을 제대로 만들고 있는가?) SW가 버그없이 설계대로 구현되었는지 확인하는 프로세스 SW가 규격을 준수하는지 확인 정적 테스트(reviews, walkthroughs, inspections and desk-checking) Validation(검증) Are we building the right product? (우리가 올바른 제품을 만들고 있는가? 실사용자의 요구사항을 검토하여 제품의 유효성을 확인하는 프로세스 SW가 고객의 요구사항과 기대를 충족하는지 여부를 확인 동적 테스트(Black Box Testing, White Box Testing and non-functional testing) Ver.. 2021. 3. 8.
[Day 205] 데이터 마이닝(data mining), OLAP(on-line Analysis Program) 데이터 마이닝(data mining) 대규모로 저장된 데이터 안에서 체계적이고 자동적으로 통계적 규칙이나 패턴을 분석하여 가치있는 정보를 추출하는 과정 OLAP(on-line Analysis Program) 물리적 데이터 저장소에서 정보를 찾는 방법/설계 패러다임 여러 시스템에서 정보를 취합하여 다차원 형식으로 저장함 데이터 마이닝과 OLAP 차이 OLAP는 데이터를 요약하고 예측함. 예를 들어, "지역별, 연도별 자동차 평균 판매량은 얼마인가?"와 같은 질문에 답을 찾기 위해 활용 데이터 마이닝은 단순히 요약이 아니라 데이터에서 숨겨진 패턴을 발견하는 것. 예를 들어, 고객 이탈이 핵심 요소인 통신 산업에서 "누가 어떤 통신사로 이동할 것인지, 그 이유는 무엇인지?"와 같은 질문에 대한 답을 찾기 위해.. 2021. 3. 3.