컴퓨터하는 상어
-
스마트팩토리에서 수치 데이터 기반 예측 모델 프로젝트를 하면서 주의할 점들Data Science/데이터마이닝 2023. 4. 23. 20:46
이번 글에서는 회귀 예측 모델을 기반으로한 프로젝트들을 진행하면서, 짚고 넘어가야하는 부분에 대해서 글을 작성해보려한다. 해당 글에서 나오는 모든 내용은 경험 기반의 내용들로 빠진 부분이나 틀린 부분이 있다면 피드백 주시기바란다. 1. 데이터 정합성 확인(실제로 내가 생각하는 데이터가 들어오고 있는가?) 통상적으로 수치 데이터 과제를 진행한다면, 여러 DB에서 얻어진 데이터를 기반으로 진행하게 된다. 이때, 사용하는 데이터들이 실제로 측정되고 있는 값인지, 도메인적/수치적으로 정합한 값인지 꼭 확인하는 과정이 필요하다. 아래는 실제로 발생했던 케이스 들을 예시로 들어본다. 1) 센싱된 데이터가 잘못된 값일 경우 수치적으로는 이상이 없는 변수였으나, 도메인적 사실과 너무 다른 양상을 보이기에 확인해본 결과..
-
[Window] 윈도우 스케줄러를 통한 실행파일 자동 실행하기환경&시스템 구축 2023. 4. 12. 23:28
https://www.itworld.co.kr/howto/261202
-
[Window] 스크립트 실행파일 만들기(BAT, Window Bash file)환경&시스템 구축 2023. 4. 12. 23:27
파일복사등의 스크립트 파일을 윈도우에서 실행하고 싶을때, Bash 파일을 윈도우에서 동작하려면 추가적인 설정이 필요하기 때문에 BAT 파일을 만들어 간단히 사용할 수 있다. (윈도우에서도 Bash 파일을 동작 할 수 있으나, 본 포스팅에서는 다루지 않는다.) 1. BAT 파일 만들어보기 에디터로 무료 프로그램인 노트패트++을 사용한다. 1.1 내용 작성 1.2 BAT 파일로 저장 1.3 생성된 BAT 파일 실행해보기
-
SCP, PSCP를 통한 원격 파일 복사하기(Secure Copy, ssh)환경&시스템 구축 2023. 4. 12. 22:50
1. SCP 사용방법(Linux) Scp는 ssh 프로토콜 기반의 파일복사(전송) 프로토콜이다. ssh와 동일하게 22 포트를 사용하여 안정적인 프로토콜이다. # 로컬PC to 원격PC # scp [옵션] [파일명] [원격PC id]@[원격PC ip]:[저장경로] scp testfile.txt root@111.111.111.111:/home/datafolder 현재 위치의 testfile.txt를 원격PC의 /home/datafolder에 복사 (하위 파일을 가지는 디텔토리 인경우 옵션 -r을 추가해야한다) # 원격PC to 로컬PC # scp [옵션] [원격PC id]@[원격PC ip]:[파일명] [저장경로] scp root@111.111.111.111:/home/datafolder/testfile.t..
-
솔루션과 플랫폼의 정의 및 차이MLOps 2023. 3. 20. 23:51
이전에 다녀온 Smart Factory Aotomation World 2023 뿐만 아니라 다양한 기업 및 매체에서 솔루션과 플랫폼이라는 단어를 쉽게 접할 수 있다. 어렴풋이 그 내용 및 차이점을 인지하고는 있지만, 타인에서 명쾌하게 설명하지 못하는 자신을 보며 한번 이에대해서 정리해보려 한다. ※다양한 분야에서 다양한 의미로 사용되는 단어인 만큼, 해당 글에서 말하는 정의는 글쓴이가 스마트팩토리/데이터사이언티스트 도메인에서 경험을 기반으로 작성하는 글이며 다른관점이 있을 수 있음을 알린다. 1. 솔루션(Solution)이란? 어떠한 특정 상황에 대한 해결책으로, 사용자 요구에 따라서 문제를 처리해주는 하드웨어 or 소프트웨어를 가리킨다. 대다수의 기업에서 사용하는 ERP(Enterprise Resour..
-
[SFAW2023]2023 스마트공장 • 자동화산업전 정리 및 후기일상 잡담 2023. 3. 11. 16:01
2023 스마트공장 자동화산업전(2023 Smart Factory + Automation World, 이하 SFAW)에 참석하게 되어서 이에대한 정리와 후기를 작성해본다. SFAW는 3일간 스마트공장과 자동화산업이라는 주제로 전시부스 및 컨퍼런스를 통해 여러 기업의 솔루션 및 비전을 살펴볼 수 있다. 하드웨어와 소프트웨어 가리지않고 다양한 제품 및 솔루션이 나오는데, 일반적인 IT 전시회와는 달리 실제 하드웨어에 적용되는 제품들이 많다는 점이 특징이다. 자세한 개요는 아래와 같다. 전시주제는 크게 Aimex, Vision, Smart Factory였으며, 그중에서 Vision과 Smart Factory에 대해서 집중하여 관람하였다. 관람을 하며 관심있게 살펴본 내용들중 3가지에 대해서 정리하고 후기를 풀..
-
스마트팩토리 프로젝트에서의 요구사항 분석Data Science 2023. 2. 22. 02:01
본 글은 글쓴이가 수행하는 프로젝트들에 요구사항 분석을 적용하기 위해 개인의 생각을 정리한 글입니다. 궁금증이나 의견이 있으신분들은 자유롭게 댓글로 말씀해주시기바랍니다. 0. 요구사항 분석이 왜 필요한가? 서로 다른 도메인을 가진 사람들이 만나서 협업한다는 것은 의사소통에서부터 mismatch가 발생하기 쉽다. 실제 해당 도메인에서 암묵적으로 가정하고 들어가는 배경지식이 있다면, 타 도메인의 사람에게는 전달 되지 않을것이다. 반대로 내가 생각하던 상대 도메인의 정보들이 정확한 내용이 아닐 수도 있다. 즉, 도메인 전문가(현업 등)와 IT전문가(데이터사이언티스트 등)가 하나의 프로젝트를 수행하는데 있어서, 도메인/IT 양 측면의 관점에서 해결하고자 하는 문제의 현상과 원인 그리고 해결이 되었을 때의 결과를..
-
글또 8기를 시작하며일상 잡담 2023. 2. 9. 23:55
0. 글쓰는 또라이가 세상을 바꾼다. 지난 7기가 쏜살같이 지나가고 벌써 8기의 시작이 다가왔다. 2주일에 한개의 포스팅이라는 간단하고도 정말 어려운 이 미션을 한번더 마주할 수 있다는 것이 즐겁기도 두렵기도 하다. 7기의 시작때도 좋은 퀄리티의 글로 가득 채워야겠다는 마음을 먹었지만, 막상 마감일에 치여서 날림글을 작성했던 주차가 꽤 되었다. 이번 8기에서는 그런 주차가 없기를 다짐하며 어떠한 글을 쓰려고 하는지 정리해보려고 한다. 1. 과제(또는 프로젝트) 전반 흐름에 대한 경험과 정리 데이터 분석 또는 AI를 전공했다고 하지만, 막상 현업에 나와서 메인 업무로 과제를 진행했던적은 아직 없다. 중간중간 필요에 따라서 기술을 지원하거나 컨설팅하는 부차적인 업무를 맡았기에 과제의 전반적 프로세스를 경험해..