Wie viel Speicherplatz für Imagehoster?

[Blackbird]

Hi,

wie viel Speicherplatz sollte man für einen Imagehoster einplanen?

Eventuell kennt auch jemand einen guten Hoster für sowas?

Weil mit laufe der Zeit wird das doch sicher in den TB Bereich gehen?

[Cl0ne]

Öhm... Der Speicherplatz richtet sich nach dem Inhalt deines Geldbeutel ^^
Von 1 GB bis tausende ZB (Zettabyte) im eigenen Rechenzentrum ist alles möglich :-)

Da werden schon bissel mehr Informationen benötigt, um eine tragfähige Kalkulation in den Raum werfen zu können !!!

PS: Bei einem solchen Projekt musst Du auch gleich ein Mindestmaß an Redundanz einplanen (Kostenfaktor und so...)^^

[vlado]

Es gibt Imagehoster die haben über 80 Mio Bilder die gehosted werden.
Die verbrauchen nur 20TB mehr nicht.

[Cl0ne]

Es gibt Imagehoster die haben über 80 Mio Bilder die gehosted werden.
Die verbrauchen nur 20TB mehr nicht.

Du weißt aber schon, dass diese "etwas größeren" im Regelfall ein Content Delivery Network (CDN) ihr Eigen nennen und somit das xxx'fache von 20 TB haben oder ???

[darkness]

Dir ist schon klar das es wieder zu ein Projekt wird das sich niemals rechnen wird?

kennst du einen deutschen Imagehoster der sich halbwegs rechnet?

[Cl0ne]

*pssst* Verunsichere Blackbird nicht^^

[suchedich]

imagehoster gibt es wie sand an mehr kannst du vergessen.....

wen versuch dich hiermit https://musicstream.cc von solchen sorten gibt Es glaube ich nicht so viel... & Mit der richtigen strategie Lässt sich das auch perfekt in die Tat umsetzen und es wird dich garantiert
weniger kosten als ein image dienst...


Anime - stream seiten könnten sich auch noch Lohnen

[Cl0ne]

Sorry...

Ich habe mir gerade mit einer 1 GB static Inet-Line diese Webseite angeschaut...
Bis da mal ein Content im Web-Browser sicherbar war, sind locker 10 Sekunden vergangen !!!
Erzähle mir jetzt bitte nix von einer hoch frequentierten Webseite !!!

Wenn ich mir dann noch das Gespamme von Javascript im Quellcode ansehe, wird mir *speiübel* :P

[HTCK]

imagehoster gibt es wie sand an mehr kannst du vergessen.....

wen versuch dich hiermit https://musicstream.cc von solchen sorten gibt Es glaube ich nicht so viel... & Mit der richtigen strategie Lässt sich das auch perfekt in die Tat umsetzen und es wird dich garantiert
weniger kosten als ein image dienst...


Anime - stream seiten könnten sich auch noch Lohnen

Und warum sollte ein Musik-Streaming-Dienst "garantiert" weniger kosten als ein Imagehoster? Du scheinst ja Ahnung zu haben.


Sorry...

Ich habe mir gerade mit einer 1 GB static Inet-Line diese Webseite angeschaut...
Bis da mal ein Content im Web-Browser sicherbar war, sind locker 10 Sekunden vergangen !!!
Erzähle mir jetzt bitte nix von einer hoch frequentierten Webseite !!!

Wenn ich mir dann noch das Gespamme von Javascript im Quellcode ansehe, wird mir *speiübel* :P

Ist Opensource Software -> Ampache - Music Streaming Server (http://ampache.org)

[Cl0ne]

Also es gibt sicher sehr viel "Opensource Software", die auch sehr nützlich und qualitativ "hochwertig" ist^^ Es gibt aber auch sehr viel Müll, was auf einen "produktiven" Web-Server sehr viel Unbehagen oder gar Risiken verursacht !!! Ein wenig Recherge z.B. auf https://0day.today/ oder https://www.kb.cert.org/vuls/ sollte jeden User und natürlich Server-Admin hellhörig werden lassen !!!

[ToLinkTo]

Aus Erfahrung kann ich sagen das du am Anfang nicht sehr viel Speicher brauchst, 1 TB reicht locker für den Anfang.
Die meisten Hoster speichern die Bilder außerdem in eine Cloud z.B. AWS und skalieren somit ins unendliche. Voraussetzung natürlich ein System was das kann.

[Finch]

Bilder sind mit der Zeit relativ Speicherschonend geworden.
Jedoch gibt es viele Kriterien die du leider aktuell nicht gibst:

- wer ist deine Zielgruppe
- möchtest du Bilder so speichern wie sie hochgeladen werden, oder verarbeiten (konvertieren)
-- Verarbeiten
--- welche Formate?
--- alle gleichzeitig speichern?

So ganz von den löschanfragen zu schweigen, die man dann auch in die Rechnung einberechnen sollte als eine Art "Speicher der gewonnen wird"

[Blackbird]

Bilder sind mit der Zeit relativ Speicherschonend geworden.
Jedoch gibt es viele Kriterien die du leider aktuell nicht gibst:

- wer ist deine Zielgruppe
- möchtest du Bilder so speichern wie sie hochgeladen werden, oder verarbeiten (konvertieren)
-- Verarbeiten
--- welche Formate?
--- alle gleichzeitig speichern?

So ganz von den löschanfragen zu schweigen, die man dann auch in die Rechnung einberechnen sollte als eine Art "Speicher der gewonnen wird"

Bilder original lassen (notfalls komprimieren)
Mit MB Grenze
Zielgruppe: Jeder (ist ja auch egal)

Brauche eigentlich nur einen Hoster mit "unendlich" speicherservice

Löschanfragen sollen ignoriert werden

[Finch]

Bilder original lassen (notfalls komprimieren)
Mit MB Grenze
Zielgruppe: Jeder (ist ja auch egal)

Brauche eigentlich nur einen Hoster mit "unendlich" speicherservice

Löschanfragen sollen ignoriert werden

Da fällt mir aktuell Scaleway ein, die bieten ihren Object Storage für 0,01$ an (Traffic müsstest du mit einer Scaleway VM + S3mount managen) dann hättest du keine Traffickosten

[Forenplage]

Für den Anfang ist sicherlich AWS, Google Cloud, Azure o.ä. sinnvoll. Dort zahlst du pro GB Speicherplatz/Monat und pro GB Traffic/Monat.

Der günstigste Anbieter ist Backblaze B2.

https://www.backblaze.com/b2/cloud-storage.html?locale=en_US


Wenn 1GB/Monat hochgeladen wird und jedes Bild im Schnitt 100x aufgerufen wird, zahlst du etwas mehr als 1$ im Monat - 10,87€ jährlich


Ich glaube nicht, dass du mit viel mehr Speicherplatz rechnen kannst.
Selbst der - meines Wissens - größte dt. Imagehoster https://www.directupload.net/index.php?mode=faq hat (siehe punkt 14) gerade mal 8TB Speicher verbraucht.
Es ist etwas ungenau ausgedrückt - vlt. sind es auch 16TB. Mehr jedenfalls nicht.

[pythonfreak]

Zur Vollständigkeit, die Hardware die directupload nutzt findet man unter: https://www.directupload.net/index.php?mode=imp

Technik:

Verwaltungs-Server:
Intel(R) Xeon(R) E3-1230 @ 3.2 GHz, 8 GB ECC-RAM,
2x 500 GB RAID 1, 1 Gbit/s Anbindung


Datenbank - Log-Server:
Intel(R) Pentium (R) G850 @ 2.9 GHz, 4 GB RAM, 2x 500 GB


Daten-Server #1 + #2 + #3 + #4 + #5 + #6:
Dual Intel(R) Xeon(R) E5620 @ 2.40 GHz,
32 GB ECC-RAM, 8x 1 TB RAID 10, 1 Gbit/s Anbindung


Daten-Server #7 + #8 + #9 + #10 + #11 + #12 + #13:
Dual Intel(R) Xeon(R) E5620 @ 2.40 GHz,
32 GB ECC-RAM, 8x 1 TB RAID 10, 1 Gbit/s Anbindung


Daten-Server #14:
Dual Intel(R) Xeon(R) E5620 @ 2.40 GHz,
32 GB ECC-RAM, 8x 1 TB RAID 10, 1 Gbit/s Anbindung

Außenanbindung:

6,0 Gbit/s Full Duplex Dedicated

Standort:

Tenovis Databurg - Frankfurt am Main

[fritzi]

Ich glaube nicht, dass du mit viel mehr Speicherplatz rechnen kannst.
Selbst der - meines Wissens - größte dt. Imagehoster https://www.directupload.net/index.php?mode=faq hat (siehe punkt 14) gerade mal 8TB Speicher verbraucht.
Es ist etwas ungenau ausgedrückt - vlt. sind es auch 16TB. Mehr jedenfalls nicht.

Nach dem was pythonfreak gepostet hat sind es dann doch eher 52TB (13*4) und das sieht nach keiner billigen Angelegenheit aus.

[suchedich]

Bilder original lassen (notfalls komprimieren)
Mit MB Grenze
Zielgruppe: Jeder (ist ja auch egal)

Brauche eigentlich nur einen Hoster mit "unendlich" speicherservice

Löschanfragen sollen ignoriert werden

wen du wirklich die löschanfragen ignorierst wird der dienst schneller offline, sein ALS dir lieb ist
ich meine Gut copyright bilder draufgeschissen aber wen deine zielgruppe wirklich jeder ist das wird sich denke ich rumsprechen
wie ein lauf-feuer und zack haste auch Personen bei deinem dienst die Kinderpornos (bilder hochladen)

[ShadowEagle]

Jeder der Löschanfragen ignorieren möchte, das schrieb er ja, dem sollte von vornhinein klar sein, dass er für die seite selbst einen Hoster braucht, der DMCA-Anfragen komplett ignoriert. Das selbst ist nicht so teuer, weil die Website selbst, also das Frontend nicht viel Resourcen verbraucht. Wenn das CMS, welches die Bidler verwaltet dann in der Lage ist nicht gleich preis zu geben, wo die Bilder liegen, dann ist alles gut.

Daher würde ich jetzt nicht unbededingt zu Google, Amazon etc. raten. Für mich klingt es danach, als ob sämtliches Content online bleiben soll, da setzt Du besser erst einmal auf einen eigenen Webserver mit min. 4 TB Speicherplatz für den Anfang. Aufgerüstet werden kann immer. Ich würde allerdings zu einem sicheren RAID-Verfahren bei den HDDs raten um im Falle der Fälle die Bilder retten zu können.

[suchedich]

Jeder der Löschanfragen ignorieren möchte, das schrieb er ja, dem sollte von vornhinein klar sein, dass er für die seite selbst einen Hoster braucht, der DMCA-Anfragen komplett ignoriert. Das selbst ist nicht so teuer, weil die Website selbst, also das Frontend nicht viel Resourcen verbraucht. Wenn das CMS, welches die Bidler verwaltet dann in der Lage ist nicht gleich preis zu geben, wo die Bilder liegen, dann ist alles gut.

Daher würde ich jetzt nicht unbededingt zu Google, Amazon etc. raten. Für mich klingt es danach, als ob sämtliches Content online bleiben soll, da setzt Du besser erst einmal auf einen eigenen Webserver mit min. 4 TB Speicherplatz für den Anfang. Aufgerüstet werden kann immer. Ich würde allerdings zu einem sicheren RAID-Verfahren bei den HDDs raten um im Falle der Fälle die Bilder retten zu können.

sobald da kinderpornos, Bilder hochgeladen werden und das wird es zu 99% Sollte der dienst einiger maßen bekannt werden.. & Er die abuse weiterhin ignoriert bei kd pornos... Kann er sich eigentlich direkt in einem land verpissen Wo es kein abkommen mit deutschland gilt sonst sag ich mal viel spaß im knast und Ja nicht die seife aufheben

[Finch]

Jeder der Löschanfragen ignorieren möchte, das schrieb er ja, dem sollte von vornhinein klar sein, dass er für die seite selbst einen Hoster braucht, der DMCA-Anfragen komplett ignoriert. Das selbst ist nicht so teuer, weil die Website selbst, also das Frontend nicht viel Resourcen verbraucht. Wenn das CMS, welches die Bidler verwaltet dann in der Lage ist nicht gleich preis zu geben, wo die Bilder liegen, dann ist alles gut.

Daher würde ich jetzt nicht unbededingt zu Google, Amazon etc. raten. Für mich klingt es danach, als ob sämtliches Content online bleiben soll, da setzt Du besser erst einmal auf einen eigenen Webserver mit min. 4 TB Speicherplatz für den Anfang. Aufgerüstet werden kann immer. Ich würde allerdings zu einem sicheren RAID-Verfahren bei den HDDs raten um im Falle der Fälle die Bilder retten zu können.

Der Content sollte deshalb über den Server übertragen werden:

Client request -> Server fetch (s3) -> Server response (s3 data downloaded previously)

Dann kann er auch wirklich alles da speichern wie er lustig ist, zudem könnte er noch eine Verschlüsselung einrichten.

[ShadowEagle]

@suchedich:

Wenn man einigermaßen gut mit Fakedaten, anonymen Zahlungsmitteln etc. arbeitet, dann garantiert nicht. Irgendwie klingen Deine Aussagen sehr absolitär ohne Fakten anzuführen. Hast Du denn irgendeine Erfahrung in Sachen Cybercrime, die aktiv verfolgt wird? Ich meine nicht nur irgendwo Warez uploaden, ich meine eher entsprechende Warez-Portale etc. betreiben. Ansonsten solltest Du Deine Aussagen besser untermauern, weil klingt sonst nach heißer Luft - ist aber nicht persönlich gemeint, nur Kritik an der Schreibweise ansich; daher nicht wieder in den falschen Hals kriegen.

Klar wird etwas mehr Aufwand betrieben, wenn es um KiPOs geht, was ich absolut richtig finde. Der Betreiber sollten dieser eventuell zukünftigen Seite, sollte da auf jeden Fall auf Löschanfragen reagieren, meiner Ansicht nach alleine schon um so Bestien den Wind aus den Segeln zu nehmen. Die deutschen Pappnasenbehörden ermitteln dann ja nur nicht, sondern auch Europol und Interpol, die etwas geschultere und besser ausgestattete Behörden in Sachen Cybercrime haben.

[suchedich]

Nein eine, eigene warez seite hatte ich bisher nicht, war aber schon immer mein "Traum" - erfahrungen im Upload habe ich,
war auch schon bei einer warez seite (stream seite) moderator.

erfahrungen, im cybercrime hätte ich auch, Aber nur in sachen kreditkarten das habe ich mir irgendwie mal beigebracht wie ich mit fremden kreditkarten bezahlen kann und eine andre Deutsche - Ip adresse
Anlege ;-) (SOCKS)