Горячее
Лучшее
Свежее
Подписки
Сообщества
Блоги
Эксперты
#Круги добра
Войти
Забыли пароль?
или продолжите с
Создать аккаунт
Я хочу получать рассылки с лучшими постами за неделю
или
Восстановление пароля
Восстановление пароля
Получить код в Telegram
Войти с Яндекс ID Войти через VK ID
Создавая аккаунт, я соглашаюсь с правилами Пикабу и даю согласие на обработку персональных данных.
ПромокодыРаботаКурсыРекламаИгрыПополнение Steam
Пикабу Игры +1000 бесплатных онлайн игр Герои Войны - микс стратегии и РПГ. Собери лучшую армию и победи всех врагов. В игре 7 различных режимов - как для любителей PvE, так и PvP.

Герои Войны

Стратегии, Мидкорные, Экшены

Играть

Топ прошлой недели

  • SpongeGod SpongeGod 1 пост
  • Uncleyogurt007 Uncleyogurt007 9 постов
  • ZaTaS ZaTaS 3 поста
Посмотреть весь топ

Лучшие посты недели

Рассылка Пикабу: отправляем самые рейтинговые материалы за 7 дней 🔥

Нажимая кнопку «Подписаться на рассылку», я соглашаюсь с Правилами Пикабу и даю согласие на обработку персональных данных.

Спасибо, что подписались!
Пожалуйста, проверьте почту 😊

Помощь Кодекс Пикабу Команда Пикабу Моб. приложение
Правила соцсети О рекомендациях О компании
Промокоды Биг Гик Промокоды Lamoda Промокоды МВидео Промокоды Яндекс Директ Промокоды Отелло Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
0 просмотренных постов скрыто
51
Herod
Herod
1 день назад
Хомячу Сервер

Захомячил NAS не привлекая внимания санитаров⁠⁠

Поставил перед собой задачу: сделать по-настоящему быстрое файлохранилище для временных файлов при обучении нейросетей: как сами модели (промежуточные чек-поинты), так и данные для обучения. При этом мне нужны как NFS (для пингвинов с видеокартами), так и SMB (закидывать данные для обучения с основного компа и смотреть как там идут дела - подгружать промежуточные чек-поинты и смотреть, что обучение движется в нужном направлении).

Построение быстрой сети - это отдельная тема. Кстати, не так дорого: на буржуйских маркетплейсах есть куча предложений по адекватной (~$150) цене с Mellanox CX414, 416 и иже с ними (40Гбит карты), которые простой перепрошивкой можно убедить в том, что на самом деле они 100Гбит/с.

Захомячил NAS не привлекая внимания санитаров Nas, Сервер, Своими руками, Файловый сервер, Файловое хранилище, Длиннопост

После перепрошивки эта карта спокойно работает на 100Гбит/сек вопреки сказанному на наклейке.

Некоторое время я с вожделением смотрел на QNAP TBS-h574TX. Но во-первых дороговато, а во-вторых традиционная сеть у него 10Гбит, при том, что для поставленной задачи имеющиеся там два Thunderbolt порта совсем не нужны. Ну и вообще мне не понятно: у этой модели сетевые способности явно сильно хуже, чем то, что способны выдать поставленные в нее накопители.

Пришлось идти своим путем. Была взята плата MSI Pro B860M-A: у нее при mATX форм-факторе есть 3 слота под M2 SSD и 4 PCI-E слота: один х16 под видео, два х1 и один х4. В качестве процессора я поставил Core Ultra 235.
Совсем как Эллочка-Людоедочка конкурировала с миллионершей, я заселил плату пятью SSD Kingston 4TB NV3. Три штуки зашли в предусмотренные производителем разъемы, еще два я поставил в имеющиеся PCI-E x1 слоты через китайский переходник. Теперь по объему я совсем-совсем способен конкурировать с QNAP h574!

Вместо видео в слоте х16 поселилась сетевая карта, перепрошитая на 100Гбит/с.

А оставшийся слот х4 и место в корпусе под CD-ROM заняло бодрое комбо от китайских товарищей: оказывается, китайская промышленность производит "заглушку" в отсек 5.25" с шестью местами под SATA SSD 2.5"! На случай если мне понадобится побольше места, слот PCI-E x4 занял SATA адаптер на 6 портов подключенный к панели на 6 SSD.

В результате система выглядит так:

1/4

Для загрузки этой радости я подключил SATA SSD на 250Гб к порту на самой плате. И радостно установил TrueNAS.

Захомячил NAS не привлекая внимания санитаров Nas, Сервер, Своими руками, Файловый сервер, Файловое хранилище, Длиннопост

Пять дисков объединены в RAIDZ1. Из них трое получают полные PCIE x4 и способны выдать свои примерно 4ГБ/сек (вроде Kingston NV3 способен примерно на это), а два диска ограничены пропускной способностью шины и упираются в лимит 2ГБ/сек. Тем не менее, тесты производительности радуют: 6.7ГБ/сек на запись и 9.3ГБ/сек на чтение:

Захомячил NAS не привлекая внимания санитаров Nas, Сервер, Своими руками, Файловый сервер, Файловое хранилище, Длиннопост

Сеть тоже работает как задумано. Сервер подключен к 100Гбит порту на Mikrotik CRS510, клиент был подключен к тому же свичу через Breakout Cable: 100Гбит делятся на два "хвоста" по 50Гбит, каждый для отдельного компа.

Захомячил NAS не привлекая внимания санитаров Nas, Сервер, Своими руками, Файловый сервер, Файловое хранилище, Длиннопост
Показать полностью 8
[моё] Nas Сервер Своими руками Файловый сервер Файловое хранилище Длиннопост
24
9
rNaXx
3 дня назад
Хомячу Сервер

Ответ на пост «Домашнее медиа-облако»⁠⁠1

озадачился этим некоторое время назад, как переехали, до это пользовал HMS(home media server) но не устраивало, что надо системник держать всегда врубленным, сейчас же когда контент таскают 4 телевизора , ноут , моноблок и стационарный ПК, давно стало не вариантом. еще по "православным" ценам был приобретен Asustor 5304T куда встали 2 WD red nas edition под фото в первом рейде, и 2 toshiba MG08 по 16 tb, за год это все забилось, докупилась полка расширения AS6004U , внутри 4 штуки Seagate SkyHawk AI по 16tb место еще есть зато прекрасно себя там ощущает Plex, в гардеробе на антресоли в коридоре прекрасно себя ощущают не греются и за закрытой дверью очень тихо

Linux Сервер Файловый сервер Системное администрирование Файловое хранилище Ответ на пост Текст
3
38
miroshni.cs
3 дня назад
Хомячу Сервер

Домашнее медиа-облако⁠⁠1

Хорошее сообщество, вступаю!

Решил завести свой домашний сервачок: на ноутах и компе накопилось много файлов/фоток, старые харды начали сбоить, возник риск потери семейного архива.

Нашёл на авито сб/у серверный корпус тауэр, и б/у серверную мат.плату с двумя Ксеонами 2420v2 и 96ГБ оперативки, всë в сумме вышло на 12 тыр. В ДНС купил SSD на один ТБ, и два харда WD Red на 8 ТБ для рейда - всё новое, иначе старьё опять начнёт сыпаться.

Накатил Proxmox, объединил харды в рейд 1 (зеркало), для надёжности. К сожалению, не смог настроить аппаратный рейд через LSI MegaRAID, ОС не запускалась, сделал программный через LVM.

Внутри Proxmox создал виртуалку с FreeNAS, пробросил в неё виртуальный накопитель и настроил отдельные шары по SMB, для фильмов, фото и прочих данных.

Хотел развернуть Plex Media Server в LXC-контейнере, но шара не пробрасывалась. Забил и поднял Plex в отдельной виртуалке поверх дебиана.

Загрузил на шару обучающие видео со своих разных семинаров - крутота! Работает :) теперь с телевизора можно смотреть свои видосы и фильмы.


Пока на этом остановился, поскольку внезапно обнаружил, что старый хард с семейным фотоархивом на компе застучал... Не успел... Попробую восстановить данные и перекинуть их на файлообменник.

В дальнейших планах: установить Immich, попробовать Jellyfin (говорят, удобнее, чем Plex), привязать домен и настроить реверс-прокси. А также попробовать HomeAssistant, и, может, с self-hosted нейросетями поиграть.

Могу расписать подробнее, что и как настроил. Позже распишу, что успел настроить ещё.

[моё] Linux Сервер Файловый сервер Системное администрирование Файловое хранилище
31
contentfactory
contentfactory
3 месяца назад

Как мы сократили расходы на S3 хранилище с 2000+ до менее 30 в месяц (и где это может пригодиться вам)⁠⁠

Эта информация для тех, кто уже работает с S3-хранилищами (типа MTS Cloud, Yandex Object Storage, Selectel S3 и т.д.). Если термин s3 вам не знаком, возможно, материал покажется слишком специфичным.

Суть проблемы:

В моем сервисе (ImgFactory) пользователи генерируют архивы с картинками. Эти архивы нужно временно хранить для скачивания. Ключевое слово — временно.

Российские (и не только) S3-провайдеры все чаще переходят на тарификацию по времени хранения файлов (помимо объема и запросов). Эта модель, пришедшая от гигантов вроде AWS S3 и Azure Blob Storage, означает: платите не только за гигабайты, но и за каждый час/день, пока файл лежит в хранилище.

Наше решение (и большая экономия):

Так как нашим пользователям нужно скачать результат в течение 24 часов (а чаще — сразу), длительное хранение архива не требуется.

Мы настроили автоматическое удаление всех файлов старше 24 часов.

Результат:

На старте: Использовали облако Билайн. Платили ~2000+ рублей в месяц за 2 ТБ.

Сейчас: Используем S3 от МТС Cloud (в ВК Клауде аналогичный тариф есть). Платим менее 30 рублей в месяц за 20 ТБ (с запасом)! Почему?

Файлы не накапливаются, удаляются ежедневно.

Тарифицируется только тот небольшой объем данных, который фактически находится в хранилище в момент очередного "снимка" биллинга (как, я понимаю, это у них происходит ежедневно, возможно чуть чаще).

По сути, платим только за то, что попадает в снэпшоты системы.

Где применить этот подход ВАМ?

Если ваш сервис генерирует файлы для немедленного/кратковременного скачивания, а не для долгосрочного хранения — этот метод ваш спасение! Примеры:

Генераторы PDF (отчеты, счета, документы).

Сервисы обработки/генерации изображений (превью, водяные знаки, коллажи).

Генераторы контента (тексты, аудио, видео через нейросети).

Сервисы конвертации файлов (из одного формата в другой).

Сервисы создания карт сайтов и иные.

Системы сборки проектов для скачивания.

Главное условие: 24 часа (или даже меньше!) — достаточный срок для скачивания результата вашими пользователями.

Итог:

Не платите за "воздух" в S3! Если ваши данные нужны только на время скачивания — настройте автоматическое удаление старых файлов. Результат, как видите, может быть ошеломляющим: экономия в 100 раз и более — это реально, как в нашем случае с 3000₽ до 30₽.

Что самое забавное, из-за низкой тарификации даже саппорт писал нам: "А чего вы не пользуетесь нашим облаком?". Мы честно ответили: "Пользуемся, просто тарификация у вас такая". Отстали...

Очень крутое решение для тех, кто начинает свой сервис, связанный с временным хранением файлов, как я считаю. Пользуйтесь.

Пруф (для тех, кто сомневается) из ЛК МТС прикрепляю. Это реальные счета за месяц. Уже около 1,5 года так работает у нас. Радуемся.

Как мы сократили расходы на S3 хранилище с 2000+ до менее 30 в месяц (и где это может пригодиться вам) Приложение, Сайт, Программа, Хранение данных, Временные файлы, Файловый сервер
Показать полностью 1
[моё] Приложение Сайт Программа Хранение данных Временные файлы Файловый сервер
5
21
Podesto
Podesto
3 месяца назад
Компьютер это просто

Создание домашнего сервера дендрофекальным методом от абсолютного нуля⁠⁠

Рассказ о том, как 26 летнему юниту надоело играть на компьютере и захотелось играться с компьютерами. Наверное с год назад я начал активно интересоваться сборкой компьютеров, собирал ради интереса себе, родтвенникам и тд., пробовал даже на продажу но дело это оказалось гиблым ибо Авито это свой отдельный мир и рынок уже полон.
Так проходит этот год, я ковыряюсь в компах, изучаю альтернативы Винде, начинаю скупать древние ноуты и ковыряться в них, приводя их в чувство и пуская в работу. И тут стреляет объявление на Авито, комп за 1000 наших народных, ни разу не думаю и бегу лутать приличный комплект на 1155 сокете. В итоге нам представлен вот такой сетап:

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Налутал!

Крайне пыльный но от этого не менее прикольный, кисточка и воздуходувка в помощь!

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Пыли реально много но блок живой!

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Получаем чистый и рабочий комплект!

Корпус в виду своего ужасного внешнего вида уехал на лом:

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Кошке он тоже не понравился...

И вот сижу думаю, продать то его точно не выйдет, на онлайн барахолке такого добра навалом, и было принято решение заняться саморазвитием и сделать домашний сервер!

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Лутаем корпус и пару дискор и вот наш сетап готов.

Далее думаем(нет)какую операционку тавить, выбор падает на убунту сервер, ибо бесплатно и вроде просто. Качаем с официального сайта образ, с помощью Rufus делаем установочную флешку и погнали!

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Види много страшных картинок, ну, мне нулю страшно было, прожженым программистам понятное дело раз плюнуть.

В целом процесс установки выглядит достаточно слегко, сначала выбираем язык и раскладку, потом размечаем диски(куда пойдет убунта а куда все остальное). На рисунке как раз она, диски можно объединить в RAID, я выбрал RAID0, когда из дисков делается одна большая папка, да не безопасно, если один диск крякнет то всё, покеда, но мы тут надеемся на лучшее, а для домашней файлопомойки наверное норм.

Едем дольше, главное не забываем что это всё хозяйство должно быть подключено к сети. После установки мы получаем IP нашего сервера и далее настраиваем доступ к нему.

Для начала на самом "сервере" мы настраивам протокол взаимодействия (поправьте если не так сказал) SSH, вбиваем сначала sudo apt install -y openssh-server

Также можно самим задать статичный ip командой sudo nano /etc/netplan/00-installer-config.yaml

Далее подключаемся с главного компа в доме, я использовал для этого MobaXterm.

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост
Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Далее устанавливаем то, что нам поможет взаимодействовать с другими компами в сети Samba

sudo apt install samba -y

настраивам доступ

sudo nano /etc/samba/smb.conf

Откроется файл настройки, назовем его так, оттуда можно всё поудалять и оставлять что-то такое:

[share]

path = /home/username/share

browseable = yes

read only = no

guest ok = no

create mask = 0777

Это настройка доступа.

Вообще кроме контента на видеохостингах мне ещё очень помогла Deepseek, инструкция была более менее.

Далее следовали танцы с бубном и поиск информации что и как настроить нормально и в итоге мы получаем домашнюю файлопомойку.

Создание домашнего сервера дендрофекальным методом от абсолютного нуля Linux, Windows, Файловый сервер, Компьютерное железо, Длиннопост

Стоит себе тарахтит)

Извиняюсь за не самые подробные инструкции. Цель не писать гайды а делиться впечатлениями от нового. Далее есть мысли сделать уже сервер к которому можно будет подключаться извне домашней сети, пойду лутать железки, всем спасибо!

Показать полностью 9
[моё] Linux Windows Файловый сервер Компьютерное железо Длиннопост
16
2
ELDCMOTORS
ELDCMOTORS
8 месяцев назад

Как настроить truenas scale и qbitorrent? Прошу помощи⁠⁠

Установил truenas scale последней версии,создал пулы, создал djail , создал пользователя, запустил smb, все папки расширены и из под винды виды. Установил qbitorrent, он у меня устанавливается на отдельный пул для установок программ, если при установке qbitorenta пути к папкам не меняю, то закачка идёт по умолчанию в пул в котором установлен qbitorrent, но мне так не нужно. Меняю пути к папкам при установке на заранее созданные в другом пуле, закачек торрентов не происходит. Извините за может не правильные термины. Очень нужна помощь в том как правильно, и где указать пути, и может быть какие то разрешения для того чтобы в загрузки qbitorent ставить нужную папку в нужном пуле. Заранее благодарен

[моё] Nas Файловое хранилище Файловый сервер Текст
4
3
dust187
10 месяцев назад

Нужна помощь с медиа сервером на Android⁠⁠

В общем суть такова: есть ли прога как roon, только для видео? Чтобы везде на компе и на телефоне сразу было видно и доступно видеоконтент. Источник - комп. Я конечно интуитивно понимаю, что здесь пахнет сетью и медиа северными заморочками. Но я вот курю уже два часа и что-то въехать не могу (хз, либо устал и голова не варит, так бывает). Короче, как сделать так , чтобы я запуская планшет на Андроид видел там свою фильмотеку, которая расположена на ПК, и мог на планшете запускать фильм? По wifi разумеется.

[моё] Android Файловый сервер Roon Компьютер Медиатека Текст
12
0
Вопрос из ленты «Эксперты»
TyuleshPelmesh
11 месяцев назад

Подскажите, а кто как делает бэкапы?⁠⁠

Наконец-то исполнил детскую мечту: я купил себе китайский ксеон, несколько hdd и поднял небольшой сервачок на Unraid ( по сути Слака с красивыми плюшками ). И хочется настроить бекапы данных с рабочего компа, а заодно с папулькиного архива фотографий. Чтоб можно было поставить на винду и оно само изменения скидывало на сервер, причем хотелось бы не просто синхронизацию, а прям бэкап, чтоб можно было восстановить состояние папки "на позавчера".

Подскажите пожалуйста, кто чем пользуется и как это правильно организовывает?
В гугле не забанили, но как говорил В.И. Ленин "Не всем статьям в интернете можно доверять", а вот личный опыт - это всегда полезно.

[моё] Вопрос Спроси Пикабу Нужен совет IT Сервер Файловый сервер Текст Резервное копирование
16
Посты не найдены
О нас
О Пикабу Контакты Реклама Сообщить об ошибке Сообщить о нарушении законодательства Отзывы и предложения Новости Пикабу Мобильное приложение RSS
Информация
Помощь Кодекс Пикабу Команда Пикабу Конфиденциальность Правила соцсети О рекомендациях О компании
Наши проекты
Блоги Работа Промокоды Игры Курсы
Партнёры
Промокоды Биг Гик Промокоды Lamoda Промокоды Мвидео Промокоды Яндекс Директ Промокоды Отелло Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
На информационном ресурсе Pikabu.ru применяются рекомендательные технологии