티스토리

CodeJC
검색하기

블로그 홈

CodeJC

codejc.tistory.com/m

PYTHON CodeJC

구독자
0
방명록 방문하기

주요 글 목록

  • 1-07. 텍스트 요약 (gensim 02) : 앞에서 진행한 '1-06. 텍스트 요약 (gensim 01)' 에서 이어진다. 3. gensim 실습01 : 언어처리 model을 불러온다.import gensimmodel=gensim.models.Word2Vec.load('ko/ko.bin')  : 1. 유사 단어 검색 및 2. 유사도 확인1.print(model.wv.most_similar("사람"))# 결과 #[('젊은이', 0.6494427919387817), ('여인', 0.6287257671356201), ('백성', 0.6063710451126099), ('포졸', 0.6043275594711304), ('죄인', 0.5960500836372375), ('선비', 0.5868039131164551), ('부녀자', 0.5654411315.. 공감수 0 댓글수 0 2024. 6. 19.
  • 1-06. 텍스트 요약 (gensim 01) : 텍스트 요약을 위해 genism에 대해 알아 보겠다. 1. gensim 이란? : 외부 라이브러리로 자연어 처리를 위해 사용하는 머신러닝 라이브러리다. 주제 모델링, 문서 인덱싱, 텍스트 유사성 찾기에 많이 사용 된다. 문서요약을 위해 summarization 모듈을 사용할 예정이다. 4.X이 버전을 설치해야 summarization 사용이 가능하다. 2. gensim 세팅 : gensim 3.7.3 버전을 설치해서 사용할 예정이다. 아래 명령어를 terminal 창에 입력해서 gensim 을 설치한다.pip install gensim==3.7.3  아래 명령어를 입력해서 뜨는 list에서 설치가 제대로 됐는지 확인한다.pip list# 결과 #Package Version---------- --.. 공감수 1 댓글수 0 2024. 6. 19.
  • 1-05. 텍스트 요약 (collections.Counter) : 텍스트 요약을 위해 collections.Counter와 most_common에 대해 알아 보겠다. 1. collections 이란? : python의 범용 내장 컨테이너 dict, list, set, tuple에 대한 대안을 제공하는 특수 컨테이너로 데이터형을 구현해 준다. 우린 여기서 요소의 갯수를 확인 할 수 있는 collections.Counter()를 학습할 것이다. 2. collections 실습. : 1-03. 텍스트 요약(textwrap) 에서 사용했던 text 변수를 그대로 사용할 예정이다. text 변수에 저장된 문자열은 Link 의 기사를 복사해서 한 줄로 붙여 사용했다. '1.02. textwrap 실습' 첫 내용을 확인하면 된다. 또한 이번 실습은 '1-04. 텍스트 요약 (r.. 공감수 1 댓글수 1 2024. 6. 18.
  • 1-04. 텍스트 요약 (re) : 텍스트 요약을 위해 re 에 대해 알아 보겠다.1. re 란? : 정규표현식(Reular Expression)은 문자열을 처리할 때 사용하는 라이브러리로, python, c, 자바, 문서작성 프로그램등 에서 활용된다. 특정 문자열을 추출하거나 변환할 수 있다. 2. re 실습. : 1-03. 텍스트 요약(textwrap) 에서 사용했던 text 변수를 그래도 사용할 예정이다. text 변수에 저장된 문자열은 Link 의 기사를 복사해서 한 줄로 붙여 사용했다. '1.02. textwrap 실습' 첫 내용을 확인하면 된다. 2.01. re.findall() : findall()은 문자열에서 조건에 맞춰 추출하는 함수이다. 첫번째 '\w+' 인자를 넣어 단어를 추출한다. 띄어쓰기를 인식해서 나눠준다. 두.. 공감수 2 댓글수 0 2024. 6. 17.
  • 1-03. 텍스트 요약 (textwrap) : 텍스트 요약을 위해 textwrap 활용 방법을 알아 보겠다. 1. textwrap 란?문자열을 보기 좋은 형태로 정렬하거나 줄바꿈하는데 사용하는 라이브러리 이다.자주 쓰는 함수긴 문장 자르 : textwrap.shorten()긴 문장 나누기 : textwrap.wrap()긴 문장 줄 바꿈 : textwrap.fill()실습을 위해 인터넷 신문의 기사 중 하나를 골라 Text만 가져 온다.아래 실습에 사용한 기사 Link 2. textwrap 실습. : 실습에 앞서 textwrap를 import 하고 text 변수에 위에 Link에서 가져온 기사를 한 줄로 넣어 저장한다.import textwraptext = "유럽과 캐나다가 선제적으로 기준금리를 내렸지만, 우리나라는 4분기 이후에나 통화정책 전환이.. 공감수 1 댓글수 0 2024. 6. 16.
  • 1-02. 텍스트 요약 (Binary와 Base64) : 텍스트를 요약하기에 앞서 바이너리(Binary)와 Base64에 대해 알아 보겠다. 1. 바이너리 파일(Binary file) 이란?    ● '0'과 '1' 2진수 데이터만으로 인코딩된 파일이다.    ● 데이터 처리에 효율적이지만 사람이 직접 읽을 수 없다.    ● 대표적인 확장자 : exe, zip, mp3, jpg, png, dll 등이 있다. 2. Base64 란?    ●  다양한 통신채널을 통해 바이너리 데이터를 안전하게 전송할 수 있게 하는 방법이다.    ●  화면에 표시되는 ASCⅡ 문자들 써서 표현할 수 있는 가장 큰 진법은 64이다.  : base64, binary, ASCⅡ등 개념이 어렵고 복잡할 수 있다. 간단하게 이야기하면 하나의 문자를 어떻게 표현하는지 그 방식이 다른 .. 공감수 1 댓글수 1 2024. 6. 10.
  • 1-01. 텍스트 요약 (개요) : Python을 이용해 텍스트를 요약하는 프로젝트를 진행할 것이다. 요약하고자 하는 내용을 디코딩한 후 키워드를 추출해서 요약하고 이를 파일로 저장하는 방향으로 프로젝트를 진행할 것이다. 공감수 1 댓글수 0 2024. 6. 10.
    문의안내
    • 티스토리
    • 로그인
    • 고객센터

    티스토리는 카카오에서 사랑을 담아 만듭니다.

    © Kakao Corp.