»RSS Benchmark sajt

      Prikazani rezultati od 1 do 9 od ukupno 9

      Tema: Sinhronizacija par miliona fajlova između Windows računara

      1. #1
        Member
        Na forumu od
        Apr 2012
        Poruka
        53

        Sinhronizacija par miliona fajlova između Windows računara

        Pozdrav,

        ko što sam napisao gore, treba da sinhronizujem na dnevnom nivou 5 miliona fajlova između dva Windows računara (Win 2008 R2 i Win 7) i ovaj broj mi polako, ali sigurno raste, a dnevne promene su otprilike 10000 izbrisanih, 120000 novih fajlova i minus od 20GB do plus od 50 GB promene u veličini. Do sada je korišćen softver Allway Sync, ali za jedno dva, tri meseca više neće moći da se koristi za ovu namenu (prespor).

        Razmišljao sam o rsync varijanti za Windows (odgovara i plaćena varijanta), te ako je neko imao ovakvu situaciju zamolio bih ga da preporuči softver ili kaže iskustva (bilo bi dobro kada bi softver mogao da iskoristi VSS pre sinhronizacije). Odgovarao bi i neki drugi softver za sinhronizaciju, samo da kolko tolko brzo radi (postojećem sa podelom poslova treba 10h, a to mi je presporo)

      2. #2
        VIP member
        Na forumu od
        Feb 2002
        Lokacija
        Beograd
        Poruka
        1.955
        Kod mene imam slucnu situaciju doduse sa manjim brojem fajlova ~2 miliona i rsync radi posao (opet doduse na Linux-u, ali ne verujem da to mnogo utice)
        Probaj sa http://www.opbyte.it/grsync/

        Probaj da ne prelazis ~10.000 fajlova po folderu jer to ume da uspori celu stvar dodatno.

        Obavezno javi sta si uradio

      3. #3
        VIP member Avatar korisnika Dandy
        Na forumu od
        Jul 2000
        Lokacija
        Beograd, Banovo Brdo
        Poruka
        9.373
      4. Moja mašina
        • CPU: Core i5-3570K @ 4.2GHz, Cooler Master Hyper 412S
        • MoBo: Asus P8Z77-V Deluxe
        • RAM: 16GB DDR3 @ 1333
        • VGA: Gigabyte Radeon HD6950 2GB DDR5
        • MON: Dell U2711
        • HDD: 256GB SSD + 60 GB SSD + 500GB + 640GB + 1TB + 1x1.5TB + 3x2TB + 2x3TB + 2x4TB
        • OPT: LG
        • Case: Fractal Design XL, Cooler Master Real Power Pro 1250W
        • SND: Integrisana + Philips pojačalo godište 1984. i Jamo zvučnici 2x150W sinusne snage
        • OS: Win7 x64
        • LAP: Toshiba Satellite P200-1I6
        • INET: Kablovska
      5. Ja koristim u kućnoj varijanti BitTorrent Sync, doduše za mnogo manji broj fajlova, ali kapiram da bi mogao da ga probaš, čisto da vidiš kako radi.
        "Before you speak, ask yourself, is it kind, is it necessary, is it true, does it improve on the silence?"

      6. #4
        Member
        Na forumu od
        Apr 2012
        Poruka
        53
        @Dandy - BitTorrent Sync izgleda zanimljivo. Ako sam dobro shvatio , na sajtu su najavili namenski softver Sync for file replication koji treba da izađe ubrzo (Q1 2015) koji je tačno namenjen za ovu vrstu problema. Al svakako će se ovo probati što si predložio u kućnoj varijanti.

        @Stator - da sam na Linuxu ne bi razmišljao ni sekunde, rsync i kraj, konfiguracija njegova manji problem. Ovde me više muči što ne znam nijedan kvalitetan Windows port/implementaciju za rsync. Testiracu i ovaj softver sto si predlozio gore, mada koliko sam kratko malo video nema neku schedule opciju za backup u Gui-u sto mi ne odgovara (osim ako ovo nije podrzano iz komandne linije)

      7. #5
        Member Avatar korisnika poolmaker
        Na forumu od
        Apr 2013
        Lokacija
        Sombor
        Poruka
        8.545
      8. Moja mašina
        • CPU: Intel i5-4690K
        • MoBo: Asus Z97M-PLUS
        • RAM: 2x4GB Kingston HyperX
        • MON: HP Pavilion 23xi
        • HDD: Samsung 850 EVO 250GB, HDD Western Digital 2TB
        • Case: Fractal Design Arc Mini, Seasonic M12II-520 EVO
        • SND: Microlab Solo 6C
        • OS: Windows 10 LTSB x64
      9. Nisam stručan za temu, odmah da se ogradim.
        Evo dva linka možda budu od kakve koristi.. ako ne nikom ništa.
        http://www.stackoverflow.com/questio...nc-for-windows
        www.rsync.net/resources/howto/windows_rsync.html

      10. #6
        Administrator Avatar korisnika kUdtiHaEX
        Na forumu od
        Jul 2001
        Lokacija
        Beograd, Yugoslavia
        Poruka
        17.338
      11. Moja mašina
        • CPU: ~ 40
        • RAM: ~ 1TB
        • OS: OSX, iOS, Linux
        • LAP: MacBookPro12,1, MacBookPro10,1, MacBookPro6,1, Mac Mini
        • INET: Kablovska
        • Ostalo: 25 cm
      12. A koliko su veliki ti fajlovi? Prosecno? To je mnogo vaznije od njihove kolicine.

        Ja bih, testa radi, probao ovo: http://ss64.com/nt/robocopy.html
        U svakoj laži ima pola istine. Što znači da se laž sastoji od jedne polovine, koja je istina, i druge polovine, koja je laž. E sada, ako na ovu drugu polovinu ponovo primenimo aksiomu da u svakoj laži ima pola istine, zaključujemo da u prvobitnoj laži ima 3/4 istine, a 1/4 laži. Matematičkom indukcijom dalje lako dolazimo do rezultata da je limes istinitosti svake laži = 1, tj. da je u pitanju sušta i neokaljana istina.

      13. #7
        Moderator Avatar korisnika yooyo
        Na forumu od
        Jun 2005
        Lokacija
        Beograd, London
        Poruka
        10.866
      14. Moja mašina
        • CPU: i7-4790
        • MoBo: ASUS
        • RAM: 16GB
        • VGA: NVidia GeForce 770GTX
        • MON: Dell U2716D - 27" (2560x1440)
        • HDD: Samsung Evo 840 (500GB) + 2TB HDD
        • SND: Integrisana
        • OS: Centos 7
        • LAP: Dell XPS 15
        • INET: DSL
      15. A ko dodaje i briše te fajlove? Da li se sve svodi na dodavanje i brisanje ili postoji i mogućnost izmene nekog fajla?
        pro’ gram mer (n.) - An organism that converts caffeine into code.

      16. #8
        Member
        Na forumu od
        Apr 2012
        Poruka
        53
        @kUdtiHaEX - Robocopy mi ne radi posao, ranije sam ga gledao, nema VSS podrsku (mada bi ga mogao ponovo pogledati). Fajlovi su bas raznih velicina - od par KB do par GB.

        @yooyo - 30 korisnika aktivno menja te fajlove na dnevnom nivou (i dodaje i menja i brise). Struktura foldera je isto problem jer ide do 10tak nivoa dubine, cesto se predje limit od 260 karaktera, ima jako puno situacija kada je jedan fajl u jednom folderu negde u dnu hijerarhije (npr nemam vise od 200 fajlova u bilo kom pojedinacnom folderu)

        Zasad sam se privremeno zakrpio razbijanjem posla na manje delove, al svakako radim i dalje na ovome, te čim nešto kvalitetnije sredim staviću šta sam uradio

      17. #9
        Moderator Avatar korisnika yooyo
        Na forumu od
        Jun 2005
        Lokacija
        Beograd, London
        Poruka
        10.866
      18. Moja mašina
        • CPU: i7-4790
        • MoBo: ASUS
        • RAM: 16GB
        • VGA: NVidia GeForce 770GTX
        • MON: Dell U2716D - 27" (2560x1440)
        • HDD: Samsung Evo 840 (500GB) + 2TB HDD
        • SND: Integrisana
        • OS: Centos 7
        • LAP: Dell XPS 15
        • INET: DSL
      19. Umesto što direktno pristupaju fajlovima, treba ti neki program preko koga se pristupa tim fajlovima. Taj program bi mogao da vodi računa o sinhronizaciji na više lokacija.
        pro’ gram mer (n.) - An organism that converts caffeine into code.

      Bookmarks

      Dozvoljeni tagovi

      • Ne možete pokrenuti nove teme
      • Ne možete odgovoriti u temi
      • Ne možete okačiti atačmente
      • Ne možete izmeniti svoje poruke
      •