404MEDIA가 발표한 보고서에 따르면, 세계 최고의 공공 복지 웹사이트인 인터넷 아카이브와 위키피디아가 현재 AI에 의해 파괴되고 있습니다. 이제 문제는 AI 크롤러가 미친 듯이 콘텐츠를 크롤링하고 있는 것이 아니라(아직도 미친 듯이 크롤링을 하고 있지만) 인공지능 산업은 데이터를 저장하기 위해 대용량 하드 드라이브가 필요하기 때문에 하드 드라이브 가격이 지속적으로 상승하고 적합한 제품을 구입하기가 어렵다는 점입니다.
Internet Archive와 Wikipedia 모두 데이터를 저장하려면 대용량 하드 드라이브가 필요합니다. 예를 들어 인터넷 아카이브는 매일 100TB가 넘는 새로운 데이터를 수집하며 현재 최대 210PB의 데이터를 저장했습니다. 따라서 인터넷 아카이브에서는 대용량 기계식 하드 드라이브를 지속적으로 추가하고 교체해야 합니다.
Wikimedia Foundation은 Wikipedia 및 Wikimedia Commons와 같은 여러 프로젝트를 운영합니다. Wikimedia Foundation에게는 저장 비용도 큰 문제가 되었습니다. Wikipedia에만 6,500만 개 이상의 기사가 저장되어 있습니다. 서버와 저장 용량은 Wikimedia Foundation에 매우 중요합니다.
커뮤니티 기부에 의존하고 하드 드라이브 제조업체의 도움을 구하세요.
인터넷 아카이브는 현재 많은 당사자로부터 도움을 구하고 있습니다. 예를 들어, Internet Archive 커뮤니티 회원은 하드 드라이브를 웹사이트에 무료로 기부하고 있습니다. Internet Archive는 또한 이러한 어려움을 극복하기 위해 하드 드라이브 제조업체의 도움을 적극적으로 구하고 있습니다. 그러나 무료 하드 드라이브 후원을 직접 받기는 어려울 수 있습니다. 아마도 Internet Archive는 하드 드라이브 제조업체와 합리적인 가격의 구매 계약을 맺기를 희망할 것입니다.
인터넷 아카이브 설립자인 브루스터 칼러(Brewster Kahler)는 인터넷 아카이브가 저장 용량 부족을 처리할 수 있는 몇 가지 방법을 찾았지만 저장 용량 부족이 매우 현실적인 문제가 되었으며 이 문제로 인해 인터넷 아카이브의 시간과 비용이 계속해서 소모되고 있다고 말했습니다.
위키미디어 재단은 보관 비용도 재단이 직면한 문제라고 밝혔습니다. 2025년 말부터 위키미디어 재단은 하드 드라이브 가격의 지속적인 상승을 우려해 왔습니다. 가격 인상은 메모리 및 하드 드라이브 구매에 영향을 미치며 Wikimedia Foundation의 서버 배송 주기와 향후 주문 능력에도 영향을 미칩니다.
위키미디어재단은 현 상황과 관련해 비영리단체인 만큼 예산 배분에 있어 매우 신중한 입장이라고 밝혔다. 재단은 현재 하드웨어 투자 우선순위를 합리적으로 조정해 유연성을 높이고, 기존 하드웨어의 서비스 수명을 최대한 연장하는 등 가능한 대안을 채택하고 있다.
기계식 하드 드라이브와 솔리드 스테이트 드라이브 모두 조달 문제에 직면해 있습니다.
예를 들어 인터넷 아카이브(Internet Archive)와 위키미디어 재단(Wikimedia Foundation)은 대용량 기계식 하드 드라이브 구매에 더 중점을 둘 수 있습니다. 그러나 인공지능 데이터센터에도 데이터를 저장하기 위해 대용량 하드드라이브가 필요하기 때문에 기계식 하드드라이브와 SSD 모두 조달에 어려움을 겪고 있다. AI 기업은 속도가 더 빠른 솔리드 스테이트 드라이브를 사용하는 경향이 있지만, 덜 활동적인 데이터를 저장하기 위해 기계식 하드 드라이브도 대량으로 구매합니다.
스토리지 시스템 제조사인 웨스턴디지털(Western Digital)은 대부분 데이터센터를 운영하는 기업 고객을 대상으로 2026년 재고를 대부분 매진했다고 밝혔다. 이전에 Micron의 지능형 기술은 소비자 시장에서 완전히 철수했으며 더 이상 소비자에게 메모리 및 솔리드 스테이트 드라이브 제품을 제공하지 않았습니다. 인공지능 기반 데이터센터의 성장이 메모리와 스토리지 수요 급증으로 이어졌기 때문이다.
물론 인터넷 아카이브와 위키미디어 재단이 직면한 문제는 일반 사용자들도 괴롭히고 있다. 대용량 기계식 하드 드라이브의 가격은 이제 너무 높으며, 데이터를 저장하기 위해 NAS를 조립하는 비용도 크게 증가했습니다. 인공지능 열풍이 수그러들지 않는 한 컴퓨터, 서버 등 핵심 제품 가격은 하락하기 어려울 전망이다.