본문 바로가기

메뉴전체보기

(6)
[Book] 처음읽는 양자컴퓨팅 이야기 - 왜 시작하였는가? 해당글은 양자컴퓨터를 학습하면서 궁금했던 부분들을 나름 쉽게 설명해주는 서적인 "처음읽은 양자컴퓨팅 이야기" 를 정리하면서 작성하는 글입니다. 최대한 문장을 그대로 싫는것 보다는 개인적인 표현으로 바꿔서 작성하고자 노력하고자 합니다. 현제 이 블로그에서 해당 글을 읽는 분들이 어떤 궁금증으로 해당 글을 클릭하실지는 모르겠지만. 저는 현재 IT업계에서 업무하면서 "양자컴퓨터" 라는 단어를 2019년도에 구글의 사카모어( [과학]만 년 걸리는 계산을 3분 만에...양자컴퓨터, 우리 삶 어떻게 바꿀까? | YTN) 를 통해서 처음 알게되었습니다. 당시에는 진짜 어마무시한 슈퍼컴퓨터의 등장으로 이해했고 상용화가 된다면 정말 무시무시하겠다 라는 감상뿐이였던거 같습니다. 물론 해당 발표이후 여러 학회의 태클로 실제..
[NEW] Amazon SQS launches the Extended Client Library for Python to support payloads up to 2GB 해당글은 AWS의 What's New 에 공개되어 있는 내용을 기반으로 작성하였으며 작성일 기준보다 최신사항이 업데이트 경우도 있습니다. 이 경우는 Docs 참고를 하시는편이 좋습니다(작성일 2024-03-04)_ Amazon SQS launches the Extended Client Library for Python to support payloads up to 2GB 해당 글을 기준으로 테스트 한 내용이 작성되어있습니다. Amazon Simple Queue Service(SQS)는 대용량 메시지 페이로드를 보내고 받을 수 있는 오픈 소스 Python용 확장 클라이언트 라이브러리를 출시합니다. Amazon SQS는 마이크로서비스, 분산 시스템, 서버리스 애 aws.amazon.com](https://a..
[Snowflake <> AWS] Iceberg 테이블 연동성과 관련한 특이사항 해당내용은 2024-02-28 일자 기준으로 작성된 업데이트 기능사항 기준으로 작성된 문서임으로 AWS상의 기능 변경 및 Snowflake 의 기능변경으로 인하여 내용이 상이해질수 있습니다. 최근 스노우플레이크 ICEBERG TABLE 테스트를 하면서 알게된 내용들 정리해서 공유드립니다. 먼저 ICEBERG에 대한 간단한 소개를 드리자면 object storage(S3)에 아래의 4가지 기능을 통해서 보다 쉽고 간편하게 데이터를 관리할 수 있도록 설계된 오픈소스입니다. ACID (atomicity, consistency, isolation, durability) transactions Schema evolution Hidden partitioning Table snapshots 이외 에도 ICEBERG,..
딥러닝에 대한 흐름 이해 : 노드와 학습 ​시작하기에 앞서서.. 이 시리즈의 작성이 어디까지 어떻게 행해질지는 모르겠으나 엔지니어 입장에서 변화하는 딥러닝 모델들의 흐름을 쫓아가기 위해 단어를 이해하고 정리하는 시리즈가 될 거 같습니다. 현재로서는 GPT-3 그리고 그 근간에 있는 랜스 포머(Transformer) 기술을 알아먹을 수 있게 해 보는 것이 일차적 목표입니다. 그러므로 첫 글은 딥러닝에서 자주 사용되는 노드의 개념과 학습이란 무엇인가를 알아보는 글을 작성해보려고 합니다. 그럼 시작해 보도록 하겠습니다. 컴퓨터에서 AND OR NOT은 우리가 생각하는것 보다는 매우 전지전능한 만능 도구에 가깝습니다. 그저 0 1에 대한 연산을 담당하는 것처럼 보이는 저런 간단한 도구들이 얼마나 다양하고 복잡한 기능들이 가능한지에 대하여 모르고 넘어가..
GPT-3 이게 뭐길래 이렇게 난리일까? 최근들어서 코딩하는 인공지능 이라니 SQL구문도 짜주고 대화도 자연스럽게 할 수 있다고 해서 화제가 된 모델이 있다. 이름하여 'GPT-3' Open AI 제단에서 공유중인 모델인듯하여 직접 실습하면서 그 과정들을 기록하는 페이지가 될것이다. 처음에는 해당 모듈을 사용해서 SQL 구문을 만들어주는 프로그램을 제작해보려고 한다. 참고영상은 https://www.youtube.com/watch?v=9g66yO0Jues이 영상을 참고 하려고 한다. Open AI 의 API Key를 얻으려고 해보았지만 시간과 그들의 원하는 형식의 내용이 들어가야하는등 상당한 노력이 필요한것으로 보인다 일딴 간단하게 신청은 넣어놨지만 기대는 하지 않는게 좋은거 같다. 그래서 해당 GPT-3에대한 이해에 대한 방향을 논문으로 선회..
1장 딥러닝 활용한 자연어 처리 개요 1.1 자연어 처리란 무엇일까? 자연어 처리-Nartural language processing(NLP)는 인공지능의 한분야입니다. 자연어 처리는 사람의 언어가 컴퓨터가 알아듣도록 처리하는 인터페이스 역활을 합니다. 자연어 처리의 최종목표는 컴퓨터가 사람의 언어를 이해하고 여러 가지 문제를 수행할수 있도록 하는것입니다. 대표적으로 사용되고 있는 사례들은 다음과 같습니다. - 감성 분석(sentiment analysis)과 같이 대량의 텍스트를 이해하고 수치화하는 작업 - 애플의 시리(siri), 아마존의 알렉사(alexa)와 같은 서비스를 통해 사용자의 의도를 파악하고 대화하거나 도움을 주 는 작업 - QA 봇(네이버 톡톡 등등..) 1.2 딥러닝 소개