Blogger 글 카드뉴스 자동화 2편 : 공개 피드·HTML 파싱

이 글은 Blogger 글을 카드뉴스 제작 도구로 가져오는 방법을 설명하는 시리즈 2편입니다. 공개 글 목록을 피드에서 읽고, 게시물 본문과 이미지 주소를 추출하며, 서버에서 외부 요청을 안전하게 처리하는 흐름을 소개합니다.

Blogger 글 피드와 카드뉴스 제작 과정을 보여주는 이미지

Blogger 공개 글 목록을 JSON 피드로 가져오기

공개로 설정된 Blogger 블로그는 글 피드를 제공하므로, 공개 게시물 목록을 읽는 데 별도의 API 키나 로그인이 필요하지 않습니다. 블로그 주소 뒤에 /feeds/posts/summary?alt=json를 붙여 JSON 형식의 요약 피드를 요청할 수 있습니다.

const url = origin + "/feeds/posts/summary?alt=json&max-results=20&start-index=" + start;
const response = await fetch(url);
const feed = (await response.json()).feed;
const posts = (feed.entry || []).map(entry => ({
  title: entry.title.$t,
  url: entry.link.find(link => link.rel === "alternate").href,
  date: entry.published.$t,
  thumb: (entry.media$thumbnail || {}).url || ""
}));

전체 글 수는 feed.openSearch$totalResults.$t에서 확인할 수 있습니다. 페이지당 20개를 요청한다면 다음 페이지에서 start-index를 20, 40처럼 늘려 목록을 나눠 읽습니다.

Blogger 게시물 본문에서 post-body 추출하기

요약 피드에는 본문 전체가 없을 수 있으므로, 선택한 공개 글의 HTML을 요청해 본문 영역을 찾아야 합니다. 이 글의 구현은 post-body 클래스를 가진 div 영역을 대상으로 합니다. 본문 안에 중첩된 div가 있을 수 있어 첫 번째 닫는 태그에서 끊지 말고 여는 태그와 닫는 태그의 깊이를 세어 영역 끝을 찾습니다.

let depth = 1;
let match;
const divTag = /<(\/?)div\b[^>]*>/gi;
divTag.lastIndex = start;
while ((match = divTag.exec(html))) {
  depth += match[1] ? -1 : 1;
  if (depth === 0) {
    return html.slice(start, match.index);
  }
}

본문 조각을 얻은 뒤에는 문단과 줄바꿈 태그를 줄바꿈으로 바꾸고, 나머지 HTML 태그를 정리한 다음 엔티티를 해제해 읽기 쉬운 텍스트로 만듭니다. 실제 HTML을 처리할 때는 태그·엔티티·예외 사례가 다양하므로 이 방식은 해당 구현의 처리 흐름으로 이해하고 입력을 확인해야 합니다.

Blogger 글에서 카드뉴스용 사진 주소 수집

본문 HTML의 이미지 요소에서 img src 주소를 모으면 카드뉴스에 사용할 사진 후보를 만들 수 있습니다. 본문에 이미지가 없으면 페이지의 og:image 메타 값을 대체 후보로 사용할 수 있습니다.

외부 글과 이미지를 서버에서 가져오는 이유

브라우저에서 다른 사이트의 글이나 이미지를 직접 요청하면 CORS 등 브라우저 보안 정책에 막힐 수 있습니다. 외부 이미지를 브라우저 캔버스에 그린 뒤 저장하려 할 때도 교차 출처 이미지로 인해 내보내기가 제한될 수 있습니다. 이 프로젝트는 서버가 요청을 대신 보내고 필요한 결과를 서비스 도메인으로 전달하는 구조를 사용합니다.

  • /api/list: 공개 글 목록 가져오기
  • /api/fetch: 선택한 글의 제목·본문·사진 주소 가져오기
  • /api/img: 사진을 가져와 서비스 도메인으로 전달하기

Blogger 프록시 서버의 SSRF 안전장치

외부 주소를 가져오는 서버를 누구나 임의 URL로 호출할 수 있게 두면 내부 주소 접근이나 원치 않는 서버 요청에 악용될 수 있습니다. 이 구현은 Blogger와 Blogspot 도메인만 허용하고, localhost와 사설망 주소를 차단하며, 이미지 요청을 HTTPS로 제한하고 크기 한도를 둡니다. 운영 환경에서는 호스트 이름 검증과 리다이렉트 이후 주소도 다시 확인해야 합니다.

다음 편: AI 요약과 카드뉴스 8장 생성

3편에서는 가져온 Blogger 본문을 요약해 표지·본문·마무리로 구성된 카드뉴스 8장을 만드는 방법을 다룹니다.

#Blogger개발 #Blogger피드 #JavaScript #HTML파싱 #카드뉴스자동화

이 블로그의 인기 게시물

네이버·티스토리 글을 구글 Blogger로 이전하는 방법: 무료 도구 소개

네이버 블로그 글을 구글 Blogger로 이전하는 방법: 무료 이전 도구

GitHub 대안 5곳: 코드 저장소와 웹사이트 배포 방법