Wat is de Usenet completion-rate? Zo test u hem

De completion-rate meet welk percentage van de artikelen bij een Usenet-aanbieder daadwerkelijk beschikbaar is voor download. Als een aanbieder 99 % completion claimt, betekent dat dat van elke 100 artikelsegmenten in een bericht er 99 op zijn servers staan en gedownload kunnen worden. Het ontbrekende 1 % kan tijdens de opname verloren zijn gegaan, door een takedown verwijderd zijn, of nooit ontvangen zijn van een peer.

Completion-rate is een van de belangrijkste maatstaven bij het beoordelen van een Usenet-aanbieder, maar ook een van de moeilijkste om onafhankelijk te verifiëren. Deze pagina legt uit wat de completion beïnvloedt, hoe u hem test en wat de cijfers in de praktijk betekenen.

Wanneer u een bestand van Usenet downloadt, heeft uw downloadclient elk segment nodig om het origineel te reconstrueren. Ontbreken er segmenten, dan mislukt de download tenzij er genoeg PAR2-reparatieblokken zijn om de gaten te vullen.

Bij 99 %+ completion (NewsDemon-niveau) wordt een typische download met standaard PAR2-overhead afgerond zonder dat reparatie nodig is. Het soms ontbrekende segment wordt automatisch hersteld en u merkt er niets van.

Bij 95 % completion verliest u 5 van elke 100 segmenten. PAR2-reparatie schopt bij vrijwel elke download in. Reparaties kosten tijd (CPU-intensief), en als de post niet genoeg PAR2-data bevatte, mislukt de download volledig.

Bij 90 % of lager worden grote downloads onbetrouwbaar. PAR2-reparatie kan bij veel berichten de gaten niet dekken, en u eindigt met onvolledige bestanden die u niet kunt gebruiken. Dit is het punt waarop mensen op zoek gaan naar een tweede aanbieder om de ontbrekende artikelen aan te vullen.

Backbone-kwaliteit

Een aanbieder op een goed onderhouden backbone met betrouwbare peering-relaties neemt artikelen betrouwbaarder op. Gemiste artikelen tijdens de opname zijn de meest voorkomende oorzaak van lage completion. Verliest een backbone artikelen tijdens piekverkeer, dan heeft elke aanbieder op die backbone hetzelfde gat.

Takedowns

DMCA- en NTD-takedown-verzoeken verwijderen specifieke artikelen bij een aanbieder. Aanbieders op dezelfde backbone delen dezelfde takedown-verwerking en verliezen daardoor dezelfde artikelen. Onafhankelijke aanbieders als NewsDemon verwerken takedowns apart, wat betekent dat ons completion-profiel verschilt van het gedeelde netwerk.

Retentiediepte

De completion neigt ertoe lager te worden voor oudere inhoud. Artikelen van 10+ jaar geleden hebben meer tijd gehad om geraakt te worden door hardware-uitval, opslagmigraties en gecumuleerde takedowns. NewsDemon ondervangt dat met ons exclusieve tape-archief, dat artikelen heeft hersteld die andere aanbieders bij opslagovergangen kwijtraakten.

Opslagbetrouwbaarheid

Schijfuitval gebeurt. Aanbieders met redundante opslagarchitectuur (RAID, replicatie over regio's heen) verliezen minder artikelen door hardware-uitval. NewsDemon repliceert alle artikelen over drie serverregio's.

De enige manier om de completion echt te testen, is een selectie NZBs downloaden en zien welk percentage slaagt. Een praktische aanpak:

Kies een reeks leeftijden van inhoud. Probeer iets te downloaden dat gisteren is geplaatst, iets van een maand geleden, iets van een jaar geleden en iets van meerdere jaren geleden. Completion kan per leeftijd verschillen.

Bekijk de PAR2-reparatiestatistieken. Kijk na elke download naar de logs van uw downloadclient. SABnzbd en NZBGet rapporteren beide hoeveel segmenten zijn gedownload, hoeveel ontbraken en hoeveel zijn gerepareerd. Ziet u consistent nul ontbrekende segmenten, dan is de completion zeer hoog.

Vergelijk over aanbieders. Hebt u accounts bij twee aanbieders, download dan dezelfde NZB op beide en vergelijk de reparatiestatistieken. Dat laat u het werkelijke verschil tussen hun artikelvoorraden zien.

NewsDemon handhaaft een completion-rate van 99 %+ over ons volledige retentievenster. Dit is geverifieerd door onafhankelijke reviewsites als TechRadar en NGR Blog.

Onze completion is hoog omdat wij onze eigen backbone draaien met direct peering naar andere Tier-1-exploitanten, omdat wij redundante opslag over drie regio's draaien en omdat wij exclusieve inhoud uit tape-archieven hebben hersteld. Wij hangen niet aan een gedeelde backbone waar iemand anders de opnamepijp regelt.