먼저 글쓰기에 앞서, 이 프로젝트는 순전히 개인 사용용도로 크롤링 하는 것을 알립니다. 상업용도 및 유출은 하지 않습니다. (여러분들도 조심하세요)카카오페이지에 가면 이렇게 장르별로 분류가 되어있는데원래 계획은 전체에서 한 번에 긁어와 분류를 하려고 했지만, 일정 이상
이전에 소설 링크를 가져와서 파일로 저장한 후, 하나씩 뽑아 셀레니움을 통해 정보를 가져오는 방식을 사용했다. 하지만 이 방식의 문제점은 15세 이상 이용가는 로그인을 해야하기 때문에 내가 크롤링한 소설 페이지중 일부만(특히 로맨스) 정보를 가져올 수 있었다. 로그
지난번에 파일로 저장한 링크를 불러와 하나씩 가져와 데이터를 만드는 코드를 작성했다. 오래 걸릴 것 같아 켜놓고 잤는데 자고 일어나니 오류가 뜨면서 멈췄다. 시간은 974분이 걸렸는데, 974분이 허공으로 날아가는 사태가 발생했다. 이런 오류가 뜨면서 멈췄는데 다
이전까지는 카카오 페이지의 소설 정보들을 크롤링했다.데이터 프레임까지 다 만들었으니 이제는 네이버 소설을 크롤링할 차례다.먼저 네이버 시리즈 각 카테고리의 링크들을 가져오자이번에는 이전과는 다른 방식으로 효율성을 높였다.저번에는 한 카테고리리를 크롤링 할 때마다 파일
이제 카카오, 네이버, 문피아의 크롤링이 끝났다.이제 노벨피아 차례인데, 노벨피아는 특이하게 다른 사이트들과 다르게 f12를 막아놨다.저작권을 위해, 크롤링을 막아놓은 샘인데, 이게 나에겐 큰 난관으로 다가왔다.이걸 뚫을 방법이 없나 하고 돌아다니며 찾아봤는데, 딱히
현재까지 카카오페이지, 네이버 소설 목록을 크롤링 했다. 이제 문피아를 크롤링 할 차례다. (사실 크롤링은 1주일 전 쯤 다 끝냈는데 이것 저것 한답시고 글 쓰는게 좀 늦어졌다.)
지금까지는 여러 소설 사이트에서 소설 제목, 작가 이름, 소개글, 장르를 가지고 왔다.현재까지 내가 가지고온 소설 사이트들은카카오 페이지 카카오페이지네이버 시리즈 네이버 시리즈문피아 문피아노벨피아 노벨피아이렇게 4가지가 있다.노벨피아는 기본적으로 f12를 막아놨기 때문
추진 이유 유튜브를 보다가 어떤 영상을 보게 되었다. !youtube[NxQSxM0OkkY] 이미 돌아가신 故김광석님의 목소리로 김범수의 '보고싶다'를 부르는 장면이다. 이걸 보면서 생각했다. > 그럼, 목소리를 학습시키면 내가 원하는 가수의 목소리로 원하는 곡을
저 모델을 사용하기 전에 먼저 학습시킬 데이터들을 준비해야 한다.나는 이쪽에서 참고를 했는데 이 게시글의 말에 따르면 학습시킬 모델들은 반주와 화음이 없는 노래음성, 잡음과 배경음이 없는 말하기 음성이 있어야 한다고 한다.그리고 음성 데이터 파일의 크기는 3 ~ 15초
이제 가지고 있는 목소리로 변환해 보자model_path와 config_path에 파일을 넣어주고 실행하면 모델을 불러올 수 있다.그 다음도 그대로 진행하면 목소리가 변환된 파일이 반환된다.업로드중..결과를 확인해 봤는데, 고음부분에서 많은 문제가 발생했다.아무래도 단
저 모델을 사용하기 전에 먼저 학습시킬 데이터들을 준비해야 한다.나는 이쪽에서 참고를 했는데 이 게시글의 말에 따르면 학습시킬 모델들은 반주와 화음이 없는 노래음성, 잡음과 배경음이 없는 말하기 음성이 있어야 한다고 한다.그리고 음성 데이터 파일의 크기는 3 ~ 15초
준비해둔 목소리로 똑같은 방법으로 학습을 진행했다.이번에는 강승윤 - 본능적으로를 불러보게 하였다.나중에 끝나고 더 찾아봤는데 열 몇 시간으로는 안되고 보통 2일 정도 한다고 한다.나는 웹 페이지하고도 연결하고 싶어서 플라스크를 이용해 코드와, 웹 페이지를 연동하려고
플라스크로 웹 페이지를 만들고, 그 전에 만들었던 (유튜브 url -> 음성 추출 -> 음성 설정 -> 목소리 추출) 코드를 플라스크에 이식했다.그리고 테스트를 위해 실행하는데 오류가 발생했다.오류 코드를 확인했을 때, click, typer 에서 문제가 발생했다.플라
이번에는 Stable Diffusion으로 이미지를 번경해 보려고 한다.동영상을 집어넣으면, 동영상에서 인물(한 명)을 내가 원하는 캐릭터르 바꿔주는 것을 목표로 하고 있다.(배경은 그대로, 인물만 바꿈)약 한 달 동안 진행될 예정이다.개발 환경OS: Windows 1
먼저 내가 원하는 이미지를 만들어야 한다.설치 방법은 여기에 있다.설치하고 나서 폴더의 webui-user.bat 파일을 우클릭->편집에 들어가set COMMANDLINE_ARGS= 뒤에 --autolaunch, --xformers 이 두개를 추가해 준다.\--auto
사진이 잘 나온것을 확인했다.하지만 서비스를 위해서는 이것을 코드로 구현해야 한다.찾아보니 diffusers라는 패키지가 존재했고 다운로드 했다.이 diffusers는 Hugging Face에 있는 파일로 이미지를 생성할 수 있는 것 같다.diffusers에 대한 사용
Openpose, Depth를 추출했으니, 이제 이 사진들을 이용해서 이미지를 만들어 보려한다.기존의 WebUI에서 만들어 놓은 prompt를 이용해서 txt2img를 위한 파이프라인을 만들었다.ControlNet을 이용해야 하기 때문에, StableDiffusionP
영단어 공부 나는 영단어 공부를 하는데 Anki라는 프로그램을 사용한다. 그리고 그 Anki프로그램은 텍스트 뿐 만 아니라 이미지, 음성파일도 넣을 수 있다. 영어 발음을 넣기 위해 처음에는 해당 단어를 검색, 음성 데이터를 크롤링해 다운로드 하는 코드를 짜서 이