|
|
|
Belomorus-2
Стаж: 9 лет Сообщений: 3405
|
Belomorus-2 ·
05-Май-22 11:54
(3 года 4 месяца назад, ред. 05-Май-22 11:54)
Соломон Кацман писал(а):
83085395Часто вылезает надпись HDD перегружен
Изучайте шапку этой темы.
jtad писал(а):
83085570выход только один - добавить дополнительные hdd.
А лучше – 10-терабайтный SSD.
|
|
|
|
jtad
Стаж: 8 лет 5 месяцев Сообщений: 737
|
jtad ·
05-Май-22 12:01
(спустя 6 мин., ред. 05-Май-22 14:20)
Belomorus-2
один диск никогда не сравнится с параллельной записью на 2 и более. Аналогичное сравнение можно провести с 1 ядерным процессором vs мультиядерный. Везде только и речь про threads и асинхрон, потому что накопители являются бутылочным горлом в производительности пк
|
|
|
|
Celebra
Стаж: 10 лет 8 месяцев Сообщений: 5
|
Celebra ·
05-Май-22 12:16
(спустя 15 мин.)
Ребята, есть тут курсы по гос.закупкам?
|
|
|
|
Ruroni_spb
Стаж: 16 лет 11 месяцев Сообщений: 4602
|
Ruroni_spb ·
05-Май-22 15:04
(спустя 2 часа 48 мин., ред. 05-Май-22 15:04)
Belomorus-2 писал(а):
83085703А лучше – 10-терабайтный SSD.
Если Соломон Кацман волнует только "загрузка замедляется", то есть он по какой-то причине так спешит поскорее скачать - можно и на небольшой SSD скачивать, больше ничем не нагруженный, а затем перемещать на большой HDD для хранения/раздачи. На qBittorrent перемещение выполняется "за пару кликов" без остановки раздачи. Я большинство скачанных раздач далее сортирую по папкам и переименовываю, не прерывая раздачи.
А если Соломон Кацман использует один HDD для всех задач, на нем скачиваемое/раздаваемое, да ещё система установлена и программы, то вряд ли настройки клиента помогут, разве что зарезать скорость раздачи/скачивания, количество одновременных подключений и количество активных раздач.
jtad писал(а):
83085750один диск никогда не сравнится с параллельной записью на 2 и более.
Весьма спорное заявление, зависящее от ряда факторов, может быть верным в отношении одинаковых дисков. Распараллеливание записи на несколько дисков эффективно с ориентированными на работу в массиве дисками и полноценным аппаратным контроллером, не программными решениями. Что касается SSD - там не такое уж "бутылочное горлышко" даже при многопоточных операциях.
|
|
|
|
Соломон Кацман
Стаж: 17 лет 6 месяцев Сообщений: 247
|
Соломон Кацман ·
05-Май-22 15:49
(спустя 44 мин.)
|
|
|
|
jtad
Стаж: 8 лет 5 месяцев Сообщений: 737
|
jtad ·
05-Май-22 21:04
(спустя 5 часов, ред. 05-Май-22 21:04)
Ruroni_spb
это да, c полноценным контроллером лучше, потому что нагрузка трансфера и некоторая буферизация перенимается железом контроллера. Но сейчас с увеличением ядер на машинах и быстрой памяти разница не настолько велика. Конечно зависит от дополнительной нагрузки на процессор если выполняются тяжелые задачи.
Понятное дело все харды в рейде должны быть равнозначные по скорости и объему. Иначе берется за основу самый медленный и маленький.
Просто на вскидку без всяких сложных бенчей (ибо время тратить не охота. Скорее всего и этот коммент мало кому интересен) копирование большого файла ~ 3г в среднем был на 25% быстрее на стрипе btrfs. Все девайсы 120г одной и той же фирмы
Код:
~$ sudo btrfs filesystem show
Label: 'data' uuid: 0a329162-ebb4-42af-ac32-89344ff49825
Total devices 2 FS bytes used 3.43GiB
devid 1 size 111.80GiB used 3.01GiB path /dev/sda
devid 2 size 119.24GiB used 3.01GiB path /dev/sdb
Код:
tad@jtad-HP:~$ sudo pv kubuntu.iso > /data/bla/big2
[==========>] 100%
3,42GiB 0:00:38 [92,2MiB/s]
Код:
~$ sudo pv kubuntu.iso > /mnt/home/jtad/big1
[==========>] 100%
3,42GiB 0:00:50 [69,3MiB/s]
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
08-Май-22 23:19
(спустя 3 дня)
Хм, в последний час обнаружил интересную штуку. Шаги:
1. Скачать торрент (не с rutracker).
2. Скачать файл .torrent на физически этот же торрент с другого трекера (не с rutracker).
3. Добавить в клиента второй .torrent, сделать recheck (qbittorrent чет глючит с этим делом).
4. Обнаружить, что совпадение на 98.5% хотя должно быть на 100%, сравнить файлы, вроде все одинаково, но в одном .torrent они уже скачаны, а второй говорит, что файликов нет.
5. Сделать recheck оригинального торрента (который реально ток что скачивался).
Результат? Правильно, оригинальный тоже готов только на 98.5% ...
Есть эксперты, как такое возможно и как от такого защищаться? Треш ведь какой-то. Скачал торрент, подключил его ко второму трекеру, тот при сверке нашел ошибки (за терминологию прошу не цепляться), проверил на оригинальном и тоже ошибки. При этом торрент то не перезаливался...
Чет я ничего не понимаю и теперь очкую за качество своих раздач. 8 террабайт, планирую нарастить до 14 и тут такая шляпа. Я уже как-то ловил рутрекеровские на несоответствия при речеках, но тогда думал или ssd глючат (пачка китайских, еще hdd ща подрубил, с ним интересно вышло), или торренты обновили да я не знал (хотя в этом случае не должно раздаваться вовсе если я прав). Непонятно...
Если что на mac os все крутится, ssd на apfs, внешний винт 8тб на exfat, везде guid.
|
|
|
|
x86-64
Стаж: 7 лет 3 месяца Сообщений: 28862
|
x86-64 ·
08-Май-22 23:23
(спустя 3 мин.)
RS8_8
попробуйте сравнить оригинальный и битый файл побайтово через хекс редактор
|
|
|
|
Hannibal61
Стаж: 15 лет 7 месяцев Сообщений: 17913
|
Hannibal61 ·
08-Май-22 23:31
(спустя 8 мин.)
RS8_8 писал(а):
83101259как-то ловил рутрекеровские на несоответствия при речеках
RS8_8
К Рутрекеру (и к любому другому трекеру) это отношения не имеет.
Раздачи бьются у вас в системе. Например, что-то не нравится антивируснику или в медиафайлах проигрыватели прописывают свои теги - проверка уже не пройдёт.
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
08-Май-22 23:34
(спустя 3 мин., ред. 08-Май-22 23:34)
Forgettable
вы про файлы .torrent? поясню: внутри образ bluray диска, там BDMV и CERTIFICATE. Есть 2 .torrent файла, которые ссылаются на одну физическую папку на диске, т.к. контент 1 в 1 совпадает. Скачал содержимое по одному .torrent, добавляю второй, ставлю recheck на уже скачанное, находит несоответствия. Удивляюсь, делаю recheck по оригинальному .torrent, тоже находит несоответствия в этих местах. Места несоответствий совпадают.
Свеженькое, только что получил данные: докачал с оригинального .torrent, сделал recheck второго .torrent, на этот раз готово на 99.7%. Сейчас проверяю оригинальный .torrent.
Т.е. через хекс сверять нечего, .torrent разные будут, а данные на диске в одной копии.
Hannibal61
Антивируса нет, macos сама вроде бить файлы не должна, проигрыватели в теории могут, но конкретно описанный случай еще ни разу не проигрывался, я этим занимаюсь для тестов hdd (он новый, по крайней мере полностью новый должен быть, по смарту и внешне чист) и "набивания" статы на закрытых трекерах (взять то что хватает статы взять на одном трекере и помочь раздавать на том, где статы брать не хватает, раздачи создают за меня, я просто смотрю что уже есть в дубликате и тащу себе по принципу тут могу взять, а тут помочь раздать, в прочем раздаю и там и там, место есть, пусть валяется, поинты набивает  ).
|
|
|
|
Hannibal61
Стаж: 15 лет 7 месяцев Сообщений: 17913
|
Hannibal61 ·
08-Май-22 23:35
(спустя 39 сек.)
RS8_8
На разных трекерах могут буть разные файлы, хоть и названия и размеры их будут совпадать. При проверке с торрент-файлом с другого трекера вы изменяете исходные файлы и, есстественно, с торрент-файлом с первого трекера уже проверка проходить не будет.
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
08-Май-22 23:39
(спустя 3 мин., ред. 08-Май-22 23:39)
Hannibal61
то что источник не rutracker я уточнял чтобы не просили ссылки на раздачу, я ее предоставить не могу, не этот трекер. А так понятно, что трекер скорее всего не причем, просто ситуация из разряда вон, такого быть в принципе не должно ведь ...
Hannibal61 писал(а):
83101308RS8_8
На разных трекерах могут буть разные файлы, хоть и названия и размеры их будут совпадать. При проверке с торрент-файлом с другого трекера вы изменяете исходные файлы и, есстественно, с торрент-файлом с первого трекера уже проверка проходить не будет.
Проверка не должна менять файлы, она просто проверяет чего из того, что у меня есть, годится для раздачи. И я бы остановился на этом, если бы после "докачки" по исходному .torrent оно не изменило % готовности для обоих .torrent, т.е. файлы все таки совпадают.
Если только реально попробовать сделать физическую копию, докачать разницу и сравнить совпадает или нет ... хм ...
|
|
|
|
Hannibal61
Стаж: 15 лет 7 месяцев Сообщений: 17913
|
Hannibal61 ·
08-Май-22 23:40
(спустя 1 мин.)
RS8_8 писал(а):
83101311такого быть в принципе не должно ведь ...
RS8_8
Почему вы так решили? При перезаливке раздачи на втором трекере релизёр изменил в файлах теги или какой-то логотип нарисовал - изменений размера файлов вы не заметите, а проверку на первом трекере уже пройдёт.
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
08-Май-22 23:44
(спустя 4 мин., ред. 08-Май-22 23:44)
Интересно, может ли быть так, что кто-то из сидеров побил эти файлы и теперь раздает не то и в зависимости от того, на кого из сидеров я попадаю, я получаю либо то, либо не то. К слову, это объясняет почему раньше в торрент клиентах была галочка recheck after download...
Hannibal61 писал(а):
83101328
RS8_8 писал(а):
83101311такого быть в принципе не должно ведь ...
RS8_8
Почему вы так решили? При перезаливке раздачи на втором трекере релизёр изменил в файлах теги или какой-то логотип нарисовал - изменений размера файлов вы не заметите, а проверку на первом трекере уже пройдёт.
потому что проверка не проходит из обоих источников.
смотрите: у вас есть файл А, у меня - нет, я его у вас скачиваю, теперь у меня и у вас одинаковый файл А. Затем я делаю recheck и обнаруживаю, что у меня не весь файл А, а только 98.5%. Я докачиваю оставшиеся 1.5%, делаю еще раз recheck и обнаруживаю, что теперь у меня 97.8%.
это мой случай сейчас. С тем лишь нюансом, что между recheck файла по вашему .torrent, я еще делаю recheck (без скачивания, торрент на паузе) по .torrent некоего Васи, просто чтобы посмотреть, отдает Вася тоже самое или нет.
при этом я ставлю на то, что даже если бы я не вклинивал recheck по Васе, recheck все равно бы показал неполный файл. И вот это мне не понятно.
|
|
|
|
Kematu
Стаж: 5 лет 9 месяцев Сообщений: 463
|
Kematu ·
08-Май-22 23:46
(спустя 1 мин.)
RS8_8
Может попробуете скачать раздачу первым торрентом, затем удалить торрент в клиенте и проверить её снова первым торрентом?
Так вы точно узнаете, правильно ли у вас скачивается раздача. Если да, то проблема во втором торренте (то есть уже он содержит измененные файлы).
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
08-Май-22 23:50
(спустя 4 мин.)
MWhomson
работаю над этим reckeck занимают время.
|
|
|
|
Kematu
Стаж: 5 лет 9 месяцев Сообщений: 463
|
Kematu ·
08-Май-22 23:54
(спустя 3 мин., ред. 08-Май-22 23:54)
RS8_8
Вы ещё можете развернуть вкладку "Файлы" и посмотреть какой именно файл является измененным, и есть ли в этом закономерность с другими раздачами.
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
09-Май-22 00:29
(спустя 35 мин., ред. 09-Май-22 00:29)
MWhomson
BDMV -> STREAM -> 00386.m2ts, что как бы видео поток, он 100% должен совпадать. И прочие файлы такого разряда. Ладно, исследую, возможно проблемы в физическом железе (hdd новый, изучаю его) либо mac os плохо дружит с exfat 4k кластером. Как будут новости отпишу.
П.С. Вообще я ожидал что мне сейчас накинут "та это норма, происходит потому-то, делай так-то, не прогадаешь"
MWhomson писал(а):
83101348RS8_8
Может попробуете скачать раздачу первым торрентом, затем удалить торрент в клиенте и проверить её снова первым торрентом?
Так вы точно узнаете, правильно ли у вас скачивается раздача. Если да, то проблема во втором торренте (то есть уже он содержит измененные файлы).
Проверил, один фиг не 100%, хоть 8 метров, но надо было докачать Что-то здесь явно не ладно, знать бы что ... пойду искать косяк в железе ...
|
|
|
|
Kematu
Стаж: 5 лет 9 месяцев Сообщений: 463
|
Kematu ·
09-Май-22 00:38
(спустя 8 мин., ред. 09-Май-22 00:38)
RS8_8
Изучайте.
RS8_8 писал(а):
83101441exfat 4k
Тут должен быть размер кластера (байт, Кбайт..)
Я не разбираюсь в мак ос, но может там какая-то дефрагментация работает..
|
|
|
|
Papant
Стаж: 18 лет Сообщений: 57799
|
Papant ·
09-Май-22 11:00
(спустя 10 часов)
RS8_8 писал(а):
83101441BDMV -> STREAM -> 00386.m2ts
А несовпадение в самом файле или на границе с соседними?
Если торренты создавались разными клиентами - возможно там разное чередование файлов(в новых версиях мюторрента при создании торрента есть пункт Сохранить порядок файлов), теоретически возможно какое-то несоответствие.
|
|
|
|
RS8_8
Стаж: 14 лет Сообщений: 84
|
RS8_8 ·
09-Май-22 11:57
(спустя 57 мин., ред. 09-Май-22 11:57)
MWhomson
Papant
Та не, то релизы одной группы. 4k = 4kilobytes, 4 килобайта кластер. В общем похоже, что дело в софте, если под windows 10 отформатировать hdd 8 tb в exfat 4Kb, то на mac os таблица разделов начинает ломаться. Выглядит все ок, но вот такие приколы появляются и через средства диагностик может сказать, что есть битые части. Штатные disk utility mac os и windows disk manager говорили о проблемах, исправить ни одна не смогла. Стащил все что залил и накачал, переформатировал под mac os, все стало ок. Mac os при форматировании 8 tb без вариантов берет кластер в 256Kb. Не уверен, что это хорошо, но под торренты из больших видео мб и пойдет, вариантов все равно не вижу.
Кто виноват в таком раскладе не знаю, пока не разобрался виновата файловая система либо сервисы для работы с ней. ExFat должна нативно поддерживаться везде и работать прозрачно везде, на деле сыпется. Будет забавно если теперь винда начнет ломать раздел Назад я еще не катал.
Так же с утра пробовал под виндой через bittorrent (клиент такой) (пользую qbittorrent, не брал его под винду чтобы исключить ошибку в клиенте) пробовал также про чекать файл, недокачка была на месте, докачивал и зависал при попытке сброса на диск (flushing). От так вот.
Интересно, как можно вовремя детектировать такие косяки если они снова вылезут ... я ведь в теории мог раздавать битый файл и не знать про это ... всегда верил, что у торрента есть защита от раздачи битых файлов, там сверка по чексумме при скачивании или еще как.
Да, после форматирования hdd в exfat на mac os и возвращения назад файлов (бекапил на ssd с apfs) первая же проверка дала 100% готовность файлов. Оба .torrent отлично накатились на эти локальные файлы. Хотя я ожидал, что первый раз докачать придется.
Правда, это все никак не объясняет появление нескачанных участков при случайном recheck файлов, лежащих на ssd с apfs...
|
|
|
|
gt35
Стаж: 15 лет 7 месяцев Сообщений: 796
|
gt35 ·
09-Май-22 12:20
(спустя 23 мин., ред. 09-Май-22 12:20)
А можно что-нибудь сделать с подобными висяками? Цепляются и не качают с момента обновления раздачи.
|
|
|
|
Papant
Стаж: 18 лет Сообщений: 57799
|
Papant ·
09-Май-22 12:25
(спустя 4 мин.)
gt35 писал(а):
83102928что-нибудь сделать
А зачем? Чем мешают?
Хотя в принципе можно их заблокировать через Ipfiltet по адресу и номеру порта.
|
|
|
|
Ruroni_spb
Стаж: 16 лет 11 месяцев Сообщений: 4602
|
Ruroni_spb ·
10-Май-22 02:44
(спустя 14 часов)
gt35 писал(а):
83102928Цепляются и не качают с момента обновления раздачи.
А зачем им качать? Судя по обсуждению на форуме по безопасности, ip-5-189-188-23.rz3.sivagooo.fr и rip-121-dip.fla.czerecnac.ru с VPS хостинга мюнхенского Contabo постоянно в абузах, идет скан портов и попытки взлома ресурссов для построения ботнетов, сейчас преимущественно из российских адресов для атак на российские сервисы, включены в блок-листы как опасные. В частности, проверяют уязвимости в торрент-клиентах, представляясь старой версией Azureus 2003 года.
|
|
|
|
medeved2
Стаж: 16 лет 7 месяцев Сообщений: 1238
|
medeved2 ·
10-Май-22 12:28
(спустя 9 часов)
Ruroni_spb
Тоже постоянно вижу такие висяки. Раньше думал какието неудачники качальщики с отключенным шифрованием, которые не могут скачать с моего не работающего без шифрования кубита.
Но потом увидел что такой висяк появляется и со стороны адресов используемых бесплатных прокси-серверов. Похоже что да сканируют нас по полной. Кто использует бесплатный прокси будьте начеку, возможно используете не вы, а вас.
|
|
|
|
Papant
Стаж: 18 лет Сообщений: 57799
|
Papant ·
10-Май-22 15:32
(спустя 3 часа)
medeved2 писал(а):
83107296бесплатный прокси
Бесплатный сыр - сами знаете где.. И любой адрес прокси должен быть кем-то оплачен. Вопрос - с какой целью? 
|
|
|
|
пшеничный владимир
Стаж: 13 лет 4 месяца Сообщений: 3
|
пшеничный владимир ·
11-Май-22 17:10
(спустя 1 день 1 час)
Здраствуйте, можно получить список скачаных мною торрентов за последние 10 лет?
|
|
|
|
Papant
Стаж: 18 лет Сообщений: 57799
|
Papant ·
11-Май-22 17:12
(спустя 2 мин.)
пшеничный владимир
Такая информация не хранится. Можно посмотреть только список раздач, в которых вы оставляли комментарии/отзывы. Если эти раздачи ещё "живые".
|
|
|
|
zlotosalien
Стаж: 15 лет 10 месяцев Сообщений: 13881
|
zlotosalien ·
11-Май-22 17:15
(спустя 2 мин.)
пшеничный владимир писал(а):
83112402Здраствуйте, можно получить список скачаных мною торрентов за последние 10 лет?
Можешь посмотреть в этой папке C:\Users\ИМЯ\AppData\Roaming\uTorrent (за 10 лет там конечно не будет но, наверняка какие то торренты сохранились).
|
|
|
|
пшеничный владимир
Стаж: 13 лет 4 месяца Сообщений: 3
|
пшеничный владимир ·
11-Май-22 17:39
(спустя 23 мин., ред. 11-Май-22 17:39)
Papant писал(а):
83112405пшеничный владимир
Такая информация не хранится. Можно посмотреть только список раздач, в которых вы оставляли комментарии/отзывы. Если эти раздачи ещё "живые".
а как это зделать?
|
|
|
|
