Alternativen zu Archive.org, dezentral und anders

Dies ist ein automatisch aus dem Italienischen übersetzter Text. Wenn Sie unsere Arbeit schätzen und sie gerne in Ihrer Sprache lesen, denken Sie über eine Spende nach, damit wir sie weiterhin durchführen und verbessern können.

Der heutige Artikel ist aus mehreren Gründen sehr heikel und speziell. Zart, weil Wir sprechen hier nicht von Alternativen zu einem Big-Tech-Projekt, sondern von einem grandiosen Projekt Das ist Archive.org und wir haben nicht viele Zweifel daran. Dieser Artikel über Alternativen zu Archive.org Es ist auch aus unserem Bedürfnis entstanden und zum ersten Mal ist dieser Artikel aus einem solchen entstanden Die Diskussion fand zunächst in unserem neuen Forum statt.

Unser Bedarf bestand darin, über Archive.org hinaus ein zusätzliches Archiv für die Quellen unserer Artikel bereitzustellen. Natürlich nicht, weil wir Archive.org ersetzen wollen, sondern um für alle Fälle eine Alternative zur Hand zu haben.

Alternativen zu Archive.org, dezentral und anders

Und warum nach Alternativen zu Archive.org suchen? Zunächst einmal, weil es sich um ein wichtiges und grundlegendes Projekt handelt und es daher gut wäre, mehr als eines zu haben, um nicht die gesamte Arbeitslast auf ihren Schultern zu lasten. Ein weiterer Grund ist, dass Archive.org weder unfehlbar noch unbesiegbar ist, es aber dennoch ist ein wesentlicher Bestandteil des Internets. Internet Archive kostet zusätzlich rund 25 Millionen Euro pro Jahr ¹, hatte und wird wahrscheinlich auch in Zukunft einige schwerwiegende Anschuldigungen erhalten, die im Wesentlichen darauf abzielen, es zu schließen ^{2 3 4}.

Deshalb müssen wir uns alle zusammenschließen helfen Internetarchiv auch leben durch Spenden (falls Ihnen aufgefallen ist, dass es auf der Website keine Banner oder Werbung gibt).

In der Zwischenzeit ist eine Diskussion darüber hilfreich, wie man dem Internetarchiv dabei helfen kann, „nicht allein zu sein“ und wie man auch der Nachwelt helfen kann, die sich nun auf die einzige Hoffnung des Internetarchivs und seiner Server (über 200 Petabyte an Daten) verlassen muss. ⁵) Nie passiert etwas. Dezentralisierung ist derzeit und in diesem Bereich ein heißes Thema. Soweit wir wissen, ist das Internet Archive möglicherweise selbst an diesem Weg interessiert ^{6 7}.

Wir, die ganz neugierig sind, haben uns deshalb auf die Suche nach Alternativen zu Archive.org gemacht und sind fündig geworden.

Zentralisierte Alternativen

Es handelt sich um Alternativen „wie“ Archive.org oder mit zentralen Servern, die alles speichern. Es ist sicherlich die klassischste und einfachste Methode.

• archive.today Es ist vielleicht die bekannteste und am häufigsten genutzte Internet-Archiv-Alternative überhaupt. Allerdings gibt es einige Probleme: Es ist nicht klar, wer hinter diesem Projekt steckt, es ist keine gemeinnützige Organisation wie Internet Archive, sondern offenbar das einfache Projekt einer einzelnen Person. Archive.today stellt Anfragen an externe Websites wie Google Und mail.ru und um Inhalte zu archivieren, ist es notwendig, ein CAPTCHA (von Google) zu übergeben, ohne die Möglichkeit, sich einzuloggen oder etwas anderes zu tun, um dies zu vermeiden. Es verfügt über mehrere Spiegeldomänen (die also immer auf denselben Inhalt verweisen), einige werden jedoch von verschiedenen Firewalls/Blockierungslisten für illegale und/oder gefährliche Inhalte blockiert ⁸. Kurz gesagt, es wird auch die bekannteste Alternative sein und wir haben sie auch schon oft genutzt, würden uns aber gerne ein wenig davon entfernen.
• ArchiveBox ⁹, ist wahrscheinlich die Idee, die uns am besten gefällt. Es handelt sich um eine Art sehr leicht selbst zu hostendes Internetarchiv. Es ist daher sicherlich nützlich für die Erstellung persönlicher Archive und es könnte auch interessant sein, wenn eine Art Liste von Servern entstehen würde, die es allen zur Verfügung stellen (ein bisschen wie das, was mit geschieht). Invidious, sozusagen), obwohl die Zuverlässigkeit wahrscheinlich sehr gering wäre, da es nicht für die Reproduktion auf mehreren Plattformen ausgelegt ist. Wenn also ein Server ausfällt oder verschwindet, stirbt auch der Inhalt. Daher ist es interessant, aber es muss von erfahrenen Händen verwendet werden und es könnte etwas Interessantes entstehen, insbesondere wenn automatische Werkzeuge eingesetzt werden.
• Nadelbaum von Rhizome ¹⁰, eine weitere sehr interessante Alternative. Vollständig Open Source, es kann auch selbst gehostet werden. 500 MB werden kostenlos angeboten und dann können Sie auf einen ziemlich hochbezahlten Tarif upgraden (20 € pro Monat für 40 GB!). Die Funktionsweise ist der von Archive.org sehr ähnlich und ermöglicht Ihnen die einfache Archivierung von Webseiten. Leider wirkt das Projekt etwas sich selbst überlassen, das Repositories wurde seit 2021 nicht mehr aktualisiert Ausgabe Hin und wieder lesen wir, dass niemand mehr antwortet und die Seite manchmal tagelang nicht mehr erreichbar ist, ohne dass jemand kontaktiert werden kann.
• Perma.cc Es handelt sich um die erste aufgeführte Alternative, die rein kommerzieller Natur ist. Perma.cc ist schnell und gut gemacht, erfordert jedoch eine Gebühr. Es ist nicht einmal besonders günstig, obwohl es kostenlos ist akademische Nutzung und selbst wenn es von verwendet wird Gerichtshöfe (Wir wissen nicht, ob nur Amerikaner oder aus der ganzen Welt). Wir haben es ausprobiert und die aktuellen Kosten betragen 10$ monatlich für 10 Links pro Monat, 25$ für 100 Links und 100$ monatlich für 500 Links pro Monat. Alternativ können Sie Pakete mit einzelnen Links erwerben: 10 zusätzliche Links kosten 15$, 100 zusätzliche Links 30$ und 500 Links kosten 125$. Eine kommerzielle und nicht so günstige Alternative, die bei wichtigen Anlässen nützlich sein kann, aber nicht für die tägliche oder fast tägliche Datenspeicherung geeignet ist.
• Das gäbe es auch Megalodon aber es ist alles auf Japanisch und definitiv nicht für ein europäisches Publikum geeignet, aber es erfüllt trotzdem seinen Zweck: https://megalodon.jp/2024-0404-2218-00/https://www.lealternative.net:443/.

Dezentrale Alternativen zu Archive.org und anderen Methoden zum Archivieren einer Seite

Nachdem wir die zentralisierten Alternativen geprüft haben, kommen wir zu den dezentralen Alternativen. Dezentralisierung ist zweifellos eine interessante Option, wenn es um die Archivierung von Dateien oder Websites geht, da das Löschen eines Archivs komplexer ist und die Last über ein globales Netzwerk und nicht auf einzelne Cloud-Server verteilt wird.

• Archivieren Sie das Web ¹¹ Es ist auf jeden Fall eine interessante Alternative und auch die, die wir gerne genutzt hätten, wenn da nicht die hohen Kosten und die schwierige Anschaffung gewesen wären. Es basiert auf Kryptowährung Arweave Dadurch können Sie Dateien dezentral archivieren Blockchain. Grundsätzlich können Sie die zu archivierende URL auswählen und zahlen je nach Seitengewicht in AR-Kryptowährung mit durchschnittlich 0,19 € pro Seite. Der Preis ist nicht festgelegt und ändert sich je nach Wert der Kryptowährung auf dem Markt. Heutzutage ist der Preis sicherlich überhöht, es sei denn, Sie benötigen eine einmalige Zahlung, aber selbst in diesem Fall gibt es ein großes Hindernis: Die einzige akzeptierte Zahlungsmethode ist die Arweave-Kryptowährung. Wenn Sie also nicht mit Wallets, Kryptowährungen und dergleichen vertraut sind, bleiben Sie besser stehen allein. Im Gegensatz zu anderen Projekten, die unnötigerweise auf Blockchain basieren (wer weiß, ob die Ohren klingeln). HANDHABEN (Archiv | Arweave) In diesem Fall könnte es insgesamt sinnvoll sein.

• IPFS, eine weitere Alternative, die sicherlich interessant, aber immer noch zu technisch und nicht für die breite Öffentlichkeit geeignet ist. Es ist auch darin integriert Brave Browser und ermöglicht die Dezentralisierung von Webseiten. In der Praxis werden die Seiten auf ähnliche Weise wie BitTorrent über das IPFS-Protokoll gespeichert und verteilt. Mit dem Browser Brave Sie können Knoten dieses Netzwerks werden oder externe Gateways nutzen, die leider oft Teil des Netzwerks sind Wolkenflare. Soweit wir wissen, müssen die Dateien außerdem vorhanden sein Flossen online gehalten werden und es gibt Websites, die das für uns erledigen können, wie zum Beispiel Pinata, die jedoch exorbitante Kosten verursachen. Wie bereits erwähnt, handelt es sich sicherlich um eine faszinierende Option, die für Anfänger jedoch immer noch mit großen technischen Schwierigkeiten verbunden ist und es nicht immer klar ist, wie man eine Seite „auf IPFS für alle sichtbar“ macht. Zusätzlich zu großen Projekten wie der englischen Wikipedia zu IPFS über DNSLink: https://en.wikipedia-on-ipfs.org/wiki/, alle Links, die wir im Internet gefunden haben und die in Artikeln von vor ein paar Jahren auf eine IPFS-Seite verweisen, sind verschwunden. Und das ist nicht sehr vielversprechend.

Seiten offline speichern (und in externe dezentrale Clouds hochladen)

Die letzte Lösung, die auch wir verfolgen, besteht darin, die Seiten offline zu speichern und sie dann in eine dezentrale Cloud hochzuladen. Warum dezentral? Zur vorherigen Frage: Wir suchen nach einer Methode, um eine Datei auch nach Serverproblemen und sogar nach dem Ausfall eines Dienstes (oder unseres 🤘) am Leben zu halten. Für diesen speziellen Archivierungsbedarf suchen wir daher nach einer dezentralen Methode, die eine einfache Verteilung und eine schwierige Vernichtung ermöglicht.

Sehen wir uns also an, wie Sie eine Internetseite lokal speichern können.

• Speichern Sie die Webseite dankVerlängerung Open Source SingleFileZ Dadurch wird eine Art .html + .zip erstellt, das sich beim Öffnen selbst entpackt. Wir haben mehrere ausprobiert Browser und es scheint gut zu funktionieren. In der Praxis ist es so, als ob die gesamte Site in einer einzigen .html-Datei wäre. Das einzige Problem besteht darin, dass es auf diese Weise nicht immer möglich ist, eine Vorschau der Website anzuzeigen. Manchmal ist es jedoch erforderlich, den HTML-Code mit einem zu öffnen Browser beliebig. Es hängt ein wenig davon ab, wo Sie es hosten möchten. Hier ist ein von uns erstelltes Beispiel: https://jswqquqd2yxc4fxtaqwqdx32fwqehsxbiqs5w3lb7lgap6xlikta.arweave.net/TK0IUgPWLi4W8wQtAd96LaBDyuFEJdttYfrMB_rrQqY. Nicht schlecht, oder?
• Aufleuchten Browser Chrom Sie können Seiten im .mhtml-Format speichern. Diese Erweiterung jedoch wird nicht unterstützt von Browser Firefox Wir haben auch keine Erweiterungen gefunden, die das Lesen dieser Datei mit Firefox ermöglichen. Auch aus diesem Grund haben wir es aus unserer Auswahl ausgeschlossen.
• An Web-Recorder finden Sie eine Reihe nützlicher Tools zum Speichern von Webseiten und eine Community, die Ihnen bei Problemen helfen kann.
• Laden Sie die Seite offline über Programme wie herunter Httrack ¹² oder Wget. In diesem Fall wird die Seite vollständig mit allen Dateien gespeichert und ist daher etwas schwierig „mitzunehmen“.
• Speichern Sie die Seite als PDF oder beispielsweise über einen Screenshot mit TeilenX. Diese Methode ist sehr praktisch, wenn es sich um eine einfache statische Seite mit Text handelt und wir keine dynamischen Inhalte wie beispielsweise Videos oder animierte Bilder speichern müssen. Es gibt viele Möglichkeiten, Seiten im PDF-Format zu speichern. Eine davon besteht darin, auf einer beliebigen Seite „Drucken – Als PDF speichern“ auszuführen Browser. Die Bequemlichkeit dieses Formats anstelle der Verwendung Httrack oder Wget ist, eine einzige Datei zu haben und nicht Hunderte. Die Unannehmlichkeit besteht darin, dass eine .PDF-Datei möglicherweise Schwierigkeiten bei der Suche nach dem Text hat und nicht immer gut herauskommt. Der Nachteil des Screenshots besteht darin, dass man damit nichts anfangen kann und er auch kompliziert zu lesen sein könnte. Das Speichern von Text in einem Bild ist normalerweise definitiv keine gute Idee.

Und was mache ich damit, nachdem ich diese Datei gespeichert habe?

Ein bisschen von allem, was Sie wollen. Sobald Sie sich entschieden haben, wie Sie die Datei lokal speichern möchten, sei es eine .zip-, .png-, .zip.html-, .mhtml-Datei oder den gesamten Inhalt der Website, hielten wir es für sinnvoll, sie in einem dezentralen Archiv abzulegen.

Später werden wir einen Artikel über dezentrale Alternativen zu Google Drive verfassen, wie z Storj oder Lebensmünze, speziell für diesen Artikel haben wir uns entschieden, darüber zu sprechen Arweave.

Arweave Es ist tatsächlich das, was wir heutzutage zu nutzen versuchen. Dateien werden über geteilt Blockchain was, wie erwähnt, im Gegensatz zu anderen Projekten in diesem Fall Sinn machen könnte. Es ist mit Kryptowährung verbunden Arweave und das ist der interessanteste Teil, ermöglicht Ihnen, eine Datei dauerhaft zu speichern.

Offensichtlich sind wir nicht naiv und wissen, dass „permanent“ ein wichtiges Wort ist und dass in der Informatik nichts dauerhaft sein kann, ohne dass es sich irgendwo physisch befindet. Arweave Im Moment scheint es gut strukturiert zu sein und das Projekt ist mit Hunderten von Knoten und derzeit bereits über 110 TB hochgeladenen Daten in vollem Gange ¹³. Die Dateien sind daher an die Blockchain gebunden und können habe mich immer erholt, zumindest solange es zumindest ein paar Leute gibt, die Sie arbeiten auf dieser Münze. Ihren Schätzungen zufolge wären selbst bei einem Verschwinden des 90% der Knoten noch mindestens 15 Kopien unserer Daten vorhanden ¹⁴Dies lässt uns daher denken, dass es sich um ein interessantes Projekt zur Speicherung von Langzeitdaten handeln könnte, was uns in diesem Zusammenhang interessiert.

Da alles von einem Tag auf den anderen sterben kann, würden wir es natürlich nicht als primäre Ressource nutzen, aber im Moment setzen wir uns mit der Idee auseinander, es als Alternative und Unterstützungsressource zu nutzen.

Die Datei auf der Blockchain

Ein Beispiel, um uns besser zu verstehen. Wir haben diesen HTML-Code in die Blockchain hochgeladen: https://jswqquqd2yxc4fxtaqwqdx32fwqehsxbiqs5w3lb7lgap6xlikta.arweave.net/TK0IUgPWLi4W8wQtAd96LaBDyuFEJdttYfrMB_rrQqY. Sollte die Domain arweave.net morgen sterben, ist unsere Datei immer noch sicher, da die Datei nicht physisch auf arweave.net, sondern im dezentralen Netzwerk liegt und arweave.net nur als Gateway, also als „Zugangsweg“, fungiert. Also für den Fall, dass arweave.net sterben sollte Ändern Sie einfach das Gateway (die von jedem erstellt werden kann) und die Datei ist immer erreichbar, indem Sie nur die Domäne ändern, sodass sie wie folgt sein kann: https://jswqquqd2yxc4fxtaqwqdx32fwqehsxbiqs5w3lb7lgap6xlikta.ar-io.dev/TK0IUgPWLi4W8wQtAd96LaBDyuFEJdttYfrMB_rrQqY oder https://jswqquqd2yxc4fxtaqwqdx32fwqehsxbiqs5w3lb7lgap6xlikta.permagate.io/TK0IUgPWLi4W8wQtAd96LaBDyuFEJdttYfrMB_rrQqY und so weiter.

Und wie lade ich die Dateien hoch?

Es gibt mehrere Anbieter, die Ihnen dies ermöglichen. Offensichtlich werden sie bezahlt, denn das Konzept besteht genau darin, jemanden dafür zu bezahlen, unsere Daten zu dezentralisieren und „für immer“ aufzubewahren. Es gibt zum Beispiel ArDrive oder was wir gewählt haben, was ist Akord und das ermöglicht Ihnen auch, 100 MB frei zu haben, um es auszuprobieren.

Sobald die Datei in den permanenten Speicher hochgeladen wurde, kann sie heruntergeladen werden über ihre Website teilen (was benutzerfreundlich, aber weniger sicher ist, denn wenn alle Links verschwinden würden, wären sie 404 und schwer wiederherzustellen) oder, besser, Sie können den Blockchain-Link komplett mit der Übergangs-ID teilen: https://yoejsggd72pocx24w5wxeq5jmrzczo5d6prqel7yfdeyr4fgwm2a.arweave.net/w4iZGMP-nuFfXLdtckOpZHIsu6Pz4wIv-CjJiPCmszQ. In diesem Fall reicht es, wie wir gesehen haben, selbst wenn arweave.net jemals verschwinden würde, aus, die Verbindungen auf ein anderes Gateway umzuleiten.

Wie lösche ich Dateien?

Hier kommt der spaßige Teil: Sobald Sie eine Datei hochgeladen haben es kann nicht gelöscht werden. Sie können sie nicht physisch löschen, und selbst wenn Sie Ihr Abonnement abbestellen oder Ihr Konto löschen würden, würde diese Datei verschwinden, da sie sich, wie bereits erwähnt, nicht auf einer Website oder in einer Cloud befindet, sondern überall ist und Arweave speziell dafür entwickelt wurde nicht storniert werden.

Ein einzelner Knoten kann die Datei jedoch letztendlich löschen. Nehmen wir an, China erzwingt alles Bergmann dieser Kryptowährung, um diese Transaktion zu eliminieren. Es wäre möglich, aber die Datei wäre immer noch vorhanden, solange sie auch in anderen Teilen der Welt weitergegeben wird. Die einzige Möglichkeit, das gesamte Netzwerk dazu zu bringen, Inhalte zu löschen, besteht darin, dass mehr als 50%-Knoten der Löschung zustimmen. Dadurch soll verhindert werden, dass illegale und ethisch nicht nachhaltige Inhalte irgendwo auf der Welt hochgeladen werden ¹⁵.

Alternativen zu Archive.org, dezentral und anders: Schlussfolgerungen

In diesem langen Artikel haben wir daher einige Alternativen zu Internet Archive entdeckt, die mehr oder weniger die gleiche Aufgabe erfüllen, jedoch auf unterschiedlichen Servern. Wir haben dann dezentrale Alternativen entdeckt und schließlich versucht, den Inhalt einer Seite, oder sogar beliebige Inhalte, lokal zu speichern und ihn dann weltweit weiterzuverbreiten und so zu versuchen, ihn für immer am Leben zu erhalten.

Wir haben in letzter Zeit versucht, unsere externen Quellen zu archivieren sowohl im Internet Archive als auch im Arweave-Netzwerk, mal sehen, wie es geht!

Dieses Tag @treue Alternativen wird verwendet, um diesen Beitrag automatisch an zu senden Feddit und erlauben Sie jedem im Fediversum, dazu Stellung zu nehmen.

1. Internetarchiv | Archiv | PDF[↩]
2. Internet Archive reicht abschließende Antwortschrift in der Klage zur Verteidigung der kontrollierten digitalen Kreditvergabe ein | Archiv | PDF[↩]
3. Wenn Sie an einem Buch über Internet Archive interessiert sind, laden Sie es JETZT HERUNTER. BITTE hören Sie außerdem auf, die IA als alleinigen Host für Erhaltungsprojekte zu nutzen. | Archiv | Arweave[↩]
4. Lassen Sie die Leser lesen | Archiv[↩]
5. Petabox | Archiv | PDF[↩]
6. Arweave + Internet Archive: Aufbau einer überprüfbaren Aufzeichnung der Geschichte | Archiv | PDF[↩]
7. Welche Informationen sollten wir in Filecoin aufbewahren? | Archiv | PDF[↩]
8. Bericht über Mastodon | Archiv | PDF[↩]
9. Quellcode ArchiveBox[↩]
10. Quellcode Nadelbaum[↩]
11. Quellcode Archivieren Sie das Web[↩]
12. Quellcode Httrack[↩]
13. Wie viele Daten können Sie auf einer Blockchain speichern? | Archiv | Arweave[↩]
14. Was macht Arweave immun gegen diese Probleme? | Archiv | Arweave[↩]
15. Was passiert, wenn illegale oder bösartige Inhalte hochgeladen werden? | Archiv | Arweave[↩]

Treten Sie Communities bei