서울 열린데이터광장 vs FineWeb 비교

데이터/API 가운데 서울 열린데이터광장와 FineWeb를 나란히 놓고 봤어요.

서울 열린데이터광장

서울시와 산하기관이 여는 시정 데이터 광장

정제한 대규모 웹 텍스트 학습 데이터

색이 칠해진 줄은 서로 다른 항목이에요.

항목	서울 열린데이터광장바로 가기	FineWeb바로 가기
시작가	무료	무료
무료 사용	무료	무료
형태	Open API, 파일 다운로드	데이터셋, 파일 다운로드
갱신 주기	비정기	비정기
품질	좋음	좋음
품질 근거	갱신 주기와 문서가 비교적 잘 관리됨	정제 과정과 데이터 카드가 상세하게 공개됨
상업 이용	확인 필요	출처 표시 후 가능
라이선스	데이터마다 다름	ODC-By
인증 방식	API 키	없음
무료 한도	확인 필요	-
데이터 기간	데이터셋마다 다름	Common Crawl 기반 2013년~
주요 컬럼	데이터셋명, 분류, 제공부서, 갱신주기, 인증키	text, id, dump, url, date, language, language_score, token_count
제공 형식	JSON, XML, CSV, Excel	Parquet
이런 분께 추천해요	서울 기반 지도나 생활 서비스를 만드는 개발자	언어 모델 사전학습 연구자
종류	데이터/API	데이터/API
카테고리	공공/행정, 교통	AI/머신러닝, 언어/텍스트
회사	서울특별시	Hugging Face
요금제
장점	서울 교통과 생활 데이터가 풍부 실시간 데이터 있음 인증키 발급이 간단	Common Crawl을 정제해 바로 학습에 사용 정제 방법 공개 스트리밍 지원
단점	서울 지역에 한정 데이터셋마다 라이선스가 다름 일부는 갱신이 멈춤	용량이 매우 큼 영어 중심 원문 저작권 문제 확인 필요

가격과 혜택은 바뀔 수 있어요. 결제 전 공식 사이트에서 확인하세요.