Кодеры в беде

❝Зима наступает слишком быстро. В такую ​​холодную погоду, проснувшись утром, умывшись и выкурив сигарету, кондиционер через полчаса все еще бесполезен, поэтому я включил компьютер и побежал. за десять. После нескольких вычислительных задач процессор подскочил до 90%. Я положил руки на клавиатуру ноутбука и почувствовал небольшое тепло. Оно было гораздо сильнее, чем от кондиционера. Но если бы компьютер горел сильнее, он бы, наверное, взорвался. . Тогда этой зимой Как мы будем жить?

Предисловие

Сегодня я хотел бы поделиться некоторыми мыслями о файловом хранилище.,в процессе разработки программного обеспечения,Это неизбежно затронет хранилище файлов.,Существует множество решений для хранилища файлов.,На рынке также существует множество файловых систем.,Нам нужно выбирать методы и спецификации хранилища в соответствии с нашими собственными потребностями и т. д.,Например, следует ли использовать публичное облачное хранилище или частное облачное хранилище.,все еще Гибридное облачное хранилище,Это все нужно подбирать исходя из особенностей проекта.,Ни один метод не идеален,Выбирайте полностью по сцене,В области программного обеспечения не существует серебряной пули.

сцена

В зависимости от ситуации в различных компаниях,Размер программного обеспечения,жизненный цикл,Файлы хранилища естественно разные,Давайте в основном поговорим о каком-то решении.

частное облачное хранилище

Для правительственных проектов или проектов некоторых крупных компаний, которые уделяют больше внимания безопасности и конфиденциальности файлов, они обычно используют частное облачное хранилище файлов, создают собственные файловые системы и хранят данные на собственных серверах. данные хранятся самостоятельно,

Публичное облачное хранилище

Если у некоторых начинающих компаний проект находится на ранних стадиях, у них нет возможности построить собственные компьютерные залы, а жизненный цикл программного обеспечения неопределенен, то выбор публичного облачного хранилища является хорошим выбором в этом случае. Вам нужно платить только по мере использования и напрямую использовать облачное хранилище, предоставляемое поставщиком облака. Услуги SAAS позволяют сэкономить на обслуживании файловых систем. Если в дальнейшем вы разовьетесь и захотите построить собственный компьютерный зал, вам останется только Перенесите файлы из общедоступного облака на свой собственный сервер. Публичное облако предоставляет стартапам лучший выбор.

Гибридное облачное хранилище

Есть некоторые сцены, возможно, потребуется использовать Гибридное. облачное хранилище,Есть несколько файловых хранилищ компании на собственном файловом сервере.,Но если есть какие-то потребности,Необходимость настройки большого количества внутренних и внешних сетевых сред.,Может вызвать некоторые риски безопасности для некоторых предприятий,И выход не пропорционален,В настоящее время вы можете сохранить файл в общедоступном облаке.,Сочетание публичных и частных облаков.

решение

Затем в соответствии с различными потребностями мы также можем сформулировать разные планы. При формулировании плана мы должны оценивать его с точки зрения человеческих ресурсов, финансовых ресурсов, состояния развития и т. д. Мы также должны прогнозировать будущую ситуацию и разработать разумный архитектурный план. чтобы облегчить будущее. Это будет не так болезненно.

Самостоятельная файловая система

Если нам нужна Самостоятельная файловая система,Затем вам нужно измерить размер файла,Если есть исторические данные,Затем рассчитайте ежедневный/месячный/годовой объем хранилища на основе исторических данных.,и оценить будущий рост,если не,Тогда может потребоваться оценка по клиентам или другим показателям.,Затем выберите подходящее устройство хранения данных.,Его также необходимо измерять в зависимости от назначения файла.,Некоторые файлы просто необходимо заархивировать,А некоторые документы нужно использовать в течение длительного времени.,Некоторые необходимо использовать для машинного обучения и т. д.,Тогда нам нужно сделать выбор,На рынке существует множество файловых систем, из которых мы можем выбирать.,Такие как HDFS,FastDFS,Минио и др.,При выборе нам также необходимо понимать экологию файловой системы.,Общественная деятельность,и масштабируемость,Доступность,Ремонтопригодность и другие показатели для измерения,Такие как HDFSПросто подходитхранилищебольшие файлы,Если наши файлы относительно небольшие,Тогда использование HDFS не является разумным выбором.,Другой пример: сообщество FastDFS не очень активно.,И его сложно установить и использовать.,Так стоит ли выбирать его?,Я думаю, у каждого из нас есть ответ в сердце.,Существует также формат хранилища файла.,Настройки разделов и т.д.,окажет большое влияние.

Приобретайте услуги OSS у поставщиков облачных услуг.

В стране и за рубежом существует множество поставщиков облачных услуг, предоставляющих услуги OSS.,Например, Облако Алибаба.,Тенсент Облако,Облако Huawei и т. д.,Просто платите по ходу дела,Нам нужно измерять это на основе нашего собственного бизнеса.,Например, многие услуги в системе предоставляются одним и тем же производителем.,Тогда лучше всего воспользоваться их сервисом OSS,Это может лучше интегрировать их экологию,Он также может воспользоваться этим в наибольшей степени.

Подвести итог

Ни одно решение не является идеальным, и в разработке программного обеспечения не существует серебряной пули. Только найдя наиболее подходящее решение, мы можем максимально сэкономить затраты и улучшить качество программного обеспечения.

❝На сегодня все. Спасибо за просмотр. Увидимся в следующий раз.

Minioфайловая система：Распределенная файловая система MinIO