코드 (4) 썸네일형 리스트형 무료 웹 스크래핑, AI로 자동화하는 방법 웹 스크래핑이 뭐냐고요? 쉽게 말해서 인터넷에서 정보를 자동으로 긁어오는 기술이에요. "어? 그럼 불법 아니야?"라고 묻는 분들 계실 텐데, 공개된 데이터를 정리하는 것은 전혀 문제없어요. 다만, 로그인해야 보이는 정보나 막아놓은 사이트를 뚫는 건 절대 하면 안 됩니다! 🚨 그럼 무료로 웹 스크래핑하는 방법을 알려드릴게요. 오늘의 주인공은 DeepSeek과 Crawl4AI입니다. 돈 한 푼 안 들이고 데이터를 모아서 자동으로 정리하는 방법, 같이 살펴보죠. 💻 1. 웹 스크래핑, 왜 필요할까?기업에서 원하는 데이터를 모으는 일이 엄청 많아요. 예를 들어:사용 사례설명쇼핑몰 가격 비교경쟁사 제품 가격을 자동으로 수집해 비교 분석부동산 정보지역별 부동산 가격, 매물 정보 크롤링마케팅 리드 수집잠재 고객 .. TikTok이 만든 새로운 IDE, Trae: VS Code를 넘어설 수 있을까? TikTok의 모회사 바이트댄스(ByteDance)가 개발한 새로운 무료 IDE, Trae가 등장했다. 기존 VS Code를 대체할 경쟁자로 떠오르며, AI 기반 개발 도구로서의 가능성이 주목받고 있다. 하지만 TikTok이 개발했다는 점에서 보안과 유료화 가능성에 대한 우려도 적지 않다. Trae가 정말 유용한 개발 도구일지 직접 살펴봤다. Trae의 특징과 기능: 단순한 VS Code 복제품이 아니다 Trae는 단순한 VS Code 클론이 아니다. AI 기반 기능이 강점이며, 사용자의 요구를 자동으로 분석하고 개발 프로세스를 최적화하는 기능이 포함되어 있다. 주요 특징은 다음과 같다. 기능설명AI 에이전트 지원코드 분석 및 자동 수정 기능 제공Builder 모드프로젝트 구축 과정을 자동화UI 미리보기.. 카카오톡 친구가 아니어도 단톡방에 "코드 입력"으로 초대하세요 카카오톡이 또 한 번의 혁신을 가져왔어요! 이제 친구가 아닌 사람도 초대 코드만으로 대화방에 참여할 수 있는 기능이 추가되었답니다. 이 기능은 '주변 친구 초대'라는 이름으로 제공되며, '팀채팅'을 통해 사용할 수 있어요 채팅방 개설자가 이 기능을 활성화하면 입장 코드가 생성되고, 이 코드를 받은 사람은 즉시 채팅방에 참여할 수 있답니다. 정말 편리하죠? 😎 주요 기능주변 친구 초대: 이 기능은 '팀채팅'을 통해 제공되며, 채팅방 개설자가 활성화하면 입장 코드가 생성됩니다. 이 코드를 통해 친구 추가 절차 없이도 빠르게 대화방에 참여할 수 있어요. 세미나나 행사 등에서 급하게 주변 사람들과 채팅방을 만들 때 정말 유용하겠죠? 🎉입장 코드 사용 방법: 채팅방 참여를 희망하는 사람은 방장으로부터 입.. 구글 서치 콘솔과 빙 웹마스터 도구에 티스토리 제출 자동화 티스토리 블로그를 운영하다 보면 구글 서치콘솔, 빙 웹 마스터 도구, 네이버 웹마스터 도구에 포스팅 주소를 제출하는 일이 번거롭게 느껴진다. 물론 사이트맵을 주기적으로 읽고 가져가기는 하지만, 그 주기가 직접 확인해 보면 정말 텀이 길 때가 있다. 내가 포스팅을 게을리해서 그런 것 같은 느낌도 들지만 말이다. 어차피 이제 사람들은 점점 검색을 유튜브, 틱톡, 인스타그램 등 다양한 플랫폼에서 하고 있어서 우리에게는 시간이 조금 더 필요하다. 그래서 티스토리 게시물들을 자동 제출하는 파이썬 코드를 작성했다. (pyCharm 활용) 구글 서치 콘솔의 경우Google Indexing API with Python - JC Chouinard1. 먼저 위 게시물을 온전히 참고하여, 구글 서치 콘솔에서 API키 혹은 .. 이전 1 다음
