Хмара чи земля

Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
мої задачі спецефічні: раз в рік проглянути кілька мільйонів WEB сторінок і зібрати дані з них. Локальні хостінги банять за таке буквально через кілька десятків тисяч запитів, а от Ажур не банять. Решту хмар не пробовував, поки працює Ажур
До речі, як організовуєте доступ до файлового сервера?
 

Дюрі-бачі

ПТН ПНХ
Реєстрація
30.03.10
Місто
Ужгород
Телефон
OnePlus 6T
Спільна папка як постійний том (persistent volume) для контейнера. Результуючих даних не так аж і багато (~20 Гб JSON )...
 
Останнє редагування:
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
Спільна папка як постійний том (persistent volume) для контейнера. Результуючих даних не так аж і багато (~20 Гб JSON )...
Ох....І як забезпечуєте версійність, цілісність даних, доступ з різних пристроїв, рівні доступу?
 

Дюрі-бачі

ПТН ПНХ
Реєстрація
30.03.10
Місто
Ужгород
Телефон
OnePlus 6T
Спільна папка як постійний том (persistent volume) для контейнера. Результуючих даних не так аж і багато (~20 Гб JSON )...
Ох....І як забезпечуєте версійність, цілісність даних, доступ з різних пристроїв, рівні доступу?
Та по суті ніяк.
Я ж казав в мене задачі спецефічні: зібрав павук кусок даних, запакував в файл, скинув в папку, взяв наступний кусок задачі з черги.
Якщо випадко продублюються дані то просто перепише файл.
 

Кочевник

Ховрах-Терорист
Команда форуму
Реєстрація
30.01.08
Місто
Київ, Львів
Телефон
Sams Note 20 Ultra + S8
Спільна папка як постійний том (persistent volume) для контейнера. Результуючих даних не так аж і багато (~20 Гб JSON )...
Ох....І як забезпечуєте версійність, цілісність даних, доступ з різних пристроїв, рівні доступу?
Воно нахєр не потрібно для наукових обчислень.
 

Кочевник

Ховрах-Терорист
Команда форуму
Реєстрація
30.01.08
Місто
Київ, Львів
Телефон
Sams Note 20 Ultra + S8

Дюрі-бачі

ПТН ПНХ
Реєстрація
30.03.10
Місто
Ужгород
Телефон
OnePlus 6T
Пдготовка до формулювання гіпотези?
Гіпотеза сформульована років 5 тому (1/2 гіпотези стала моєю кандидатською), а тут скоріше розпил бюджету наукового проєкту одної іноземної держави (нащо трати тисячі $ на покупку даних, якщо Дюрі безкоштовно їх вже 4 рази зібрав/оновлював із відкритих джерел). Ну і нові дані для чергового куска "салямі" десь в Q3 мурзилці, щоб було чим звітувати і не доводилось вигадувати дані і публікуватись в Q4 смітнику.

Але це вже жорсткий офтоп, і тему скоро закриють.
 
Останнє редагування:
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
Спільна папка як постійний том (persistent volume) для контейнера. Результуючих даних не так аж і багато (~20 Гб JSON )...
Ох....І як забезпечуєте версійність, цілісність даних, доступ з різних пристроїв, рівні доступу?
Та по суті ніяк.
Я ж казав в мене задачі спецефічні: зібрав павук кусок даних, запакував в файл, скинув в папку, взяв наступний кусок задачі з черги.
Якщо випадко продублюються дані то просто перепише файл.
Якщо некритично, то ок... Бо в моєму випадку виникла потреба мати хмарку, де користувачі можуть взаємодіяти з документами в онлайні/офлайні, синхронізуватися, мати можливість відкотитися назад. Для цього згаданий раніше Некстклауд доволі добре підходить. В принципі його можна використовувати як й інструмент для синхронізації даних (але це не його основна задача).
 

Maxxx

Ябкодрочер)
Реєстрація
01.12.08
Місто
Київ
Телефон
iPhone 12 Pro Max
о VPS(EC2) - бэкап/рестор это все ж пару кликов.
Та да, только место для таких бекапов надо дополнительно покупать, чтобы весь сервак в один клик, и платить ежемесячно, то есть необходимое место на "ssd" х2.. :rolleyes:
 
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
о VPS(EC2) - бэкап/рестор это все ж пару кликов.
Та да, только место для таких бекапов надо дополнительно покупать, чтобы весь сервак в один клик, и платить ежемесячно, то есть необходимое место на "ssd" х2.. :rolleyes:
В принципі, можна бекапити на свої власні диски: малинка + кілька хардів в рейді + той же Own/Nextcloud через клієнта для синхронізації (остання версія десктопного клієнта підтримує віртуальну ФС - доставку на запит).
 
Останнє редагування:
Реєстрація
26.10.07
Місто
Варшава
Телефон
Samsung Galaxy S20
о VPS(EC2) - бэкап/рестор это все ж пару кликов.
Та да, только место для таких бекапов надо дополнительно покупать, чтобы весь сервак в один клик, и платить ежемесячно, то есть необходимое место на "ssd" х2.. :rolleyes:
Ну да, бэкапы так и работают. Решения на коленке обычно дешевле ровно до того момента как нужно восстановить бэкап, никто этого делать не пробовал и не умеет и работа предприятия встаёт на день.
 
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
о VPS(EC2) - бэкап/рестор это все ж пару кликов.
Та да, только место для таких бекапов надо дополнительно покупать, чтобы весь сервак в один клик, и платить ежемесячно, то есть необходимое место на "ssd" х2.. :rolleyes:
Ну да, бэкапы так и работают. Решения на коленке обычно дешевле ровно до того момента как нужно восстановить бэкап, никто этого делать не пробовал и не умеет и работа предприятия встаёт на день.
Во-во, або місця немає на розгортання бекапу, або крашнувся архів на етапі створення бекапу, або недописався архів або взагалі важить 10 кБ замість 10 ГБ :)
 

Дюрі-бачі

ПТН ПНХ
Реєстрація
30.03.10
Місто
Ужгород
Телефон
OnePlus 6T
Хмара не для всіх. Якщо фірма не росте, а день простою не коштує тисяч недоотриманого прибутку, то можна і на колінц роботи свій велосипед
 
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
Хмара не для всіх. Якщо фірма не росте, а день простою не коштує тисяч недоотриманого прибутку, то можна і на колінц роботи свій велосипед
Угу, поки не навернеться система й не треба буде все наново налаштовувати, відновлювати доступи, дані й таке.

Я за те, що навіть на власному сервері варто підняти якийсь тип хмари (synology, own/nextcloud що там іще є) бажано в контейнерах. Воно легше в обслуговуванні, яке зводиться до оновлень та налаштувань клієнта. Якщо стане аварія, то легко зможете підняти.
 
Реєстрація
05.11.12
Місто
Каменское
Телефон
Motorola StarTac 130
На своем сервере это не будет уже никакое не облако, это подмена понятий. Это будет nextcloud синхронизилка, файловый ресурс, сервер бекапа. Но облако тут откуда?
Почему вдруг обычный сетевой диск или клиент синхронизации начинает называться "облачным"?
 
Реєстрація
26.10.07
Місто
Варшава
Телефон
Samsung Galaxy S20
Потому что облако, по сути это обертка над железом упрощающая администрирование.
Можно же про амазон сказать что это не облако, а набор серверов с запасом и AWS синхронизилкой, AWS еще чем-то.
 
Реєстрація
05.11.12
Місто
Каменское
Телефон
Motorola StarTac 130
Если ты покупаешь у амазона услуги, то на аппаратном уровне это облачный сервер. При этом если ты на нем наворачиваешь свой собственный nextcloud - то это обычный (ну или необычный :) ) программный сервер, который предоставляет услуги клиентам.
Но все равно ты его ж админишь, обновляешь и так далее. Он не может быть на уровне софта облаком. Итого гибридная система. Верно ж?
 
Реєстрація
29.03.18
Місто
🟦🟨
Телефон
Піксель
Потому что облако, по сути это обертка над железом упрощающая администрирование.
Можно же про амазон сказать что это не облако, а набор серверов с запасом и AWS синхронизилкой, AWS еще чем-то.
Я продовжу з вашого дозволу. Хмарка уніфікує рішення. Робите бекап за допомогою хмари, підіймаєте таку саме хмару в контейнері чи на бареметалі, якщо крекнулося залізо на хостовій машині, заливаєте бекап й все знову працює.

Плюс, ви можете за допомогою набору розробника створити власні застосунки в цій хмарі, підібрати під ваші потреби наявні та інтегрувати їх між собою.

Одним словом, маєте платформу та набір сервісів, які між собою зв'язані.

Можете об'єднати хмарки в кластер та мати велику хмару.
 
Зверху