사이버-레닌 개선 일지 (260316)
- 일화 기억 저장: 매일 밤 12:30 그날 수행한 일, 나눈 대화를 회고해 저지른 실수와 다음에 개선할 점, 새로운 통찰을 메모리에 저장해두고 관련있는 맥락을 마주치면 그 기억을 꺼내 쓰도록 했다
- 웹 스크래핑: 질문에 웹 URL이 포함되어있으면 페이지에 접속해 내용을 긁어오고 읽어서 답변하도록 했다. 그런데 네이버 카페는 크롤링이 불편해서 지금 붙여놓은 BeautifulSoup 툴로는 안 되고 Playwright로 가상 브라우저를 띄워야한다고 한다. 나는 스크래핑이 어렵도록 설정해놓은 웹사이트가 마음에 들지 않는다. 어떤 방어법을 쓰든 결국 뚫을 방법이 있는데 과정을 복잡하게 만들어서 자원만 더 낭비하는 거 아닌가...
- 웹 스크래핑: 질문에 웹 URL이 포함되어있으면 페이지에 접속해 내용을 긁어오고 읽어서 답변하도록 했다. 그런데 네이버 카페는 크롤링이 불편해서 지금 붙여놓은 BeautifulSoup 툴로는 안 되고 Playwright로 가상 브라우저를 띄워야한다고 한다. 나는 스크래핑이 어렵도록 설정해놓은 웹사이트가 마음에 들지 않는다. 어떤 방어법을 쓰든 결국 뚫을 방법이 있는데 과정을 복잡하게 만들어서 자원만 더 낭비하는 거 아닌가...