|
|
|
Heaven Cat
Стаж: 14 лет 9 месяцев Сообщений: 1463
|
Heaven Cat ·
03-Июн-12 12:49
(12 лет 6 месяцев назад, ред. 03-Июн-12 12:49)
supreme6666 писал(а):
и еще хотелось бы узнать совет - есть допустим blu-ray - https://rutr.life/forum/viewtopic.php?t=1356016 там картинка с очень большой зернистостью на мой взгляд - стоит ли убирать эту зернистость и если стоит, то чем вообще рекомендуете такую зернистость убирать?
а тебе самому как больше нравится и как больше хочется????? ))))))
скрытый текст
оффтоп иллюстрация
Бортпартнер, приготовиться к боевому десантированию. Отработка проникновения на планету не-друзей.
Выполняю.
Отрыв от преследования.
Увеличение скорости невозможно. Нарушение порога устойчивости атмосферы запрещено.
Выполняй. Боевая тренировка.
Запрещено.
Долг перед Родиной.
Запрещено.
Казалось, корабль получает удовольствие, играя со мной… с Ником? в эту нехитрую игру. Выполняй – запрещено. Кто кого переспорит?
Проводим исследование предельной скорости.
Запрещено.
Мой приказ.
Запрещено.
Приказ Мирового Совета.
Нет подтверждения.
Тепло, тепло, горячо?
Тебе самому хочется превысить разрешенную скорость?
Кажется, это не Ник. Это я.
Всегда.
Превышай.
Выполняю.
Плазму сдуло с обшивки. Шар планеты крутанулся, обращаясь плоскостью, надвигаясь. И – тихо, тихо, как тогда, при вхождении в Тень, корабль прошептал мне:
Видишь – как все просто?
Действительно – просто…
Мы неслись над океаном. Уже невысоко – в двух-трех километрах. Плясали белые буруны волн – океан не хотел примиряться с геометрически безупречными материками, он все гнал и гнал на берег свои войска… А преследователи исчезли, отстали, затерялись в своих инструкциях и запретах, не способных победить единственное слово «хочешь?»
(с ) Cергей Лукьяненко "Звезды Холодные игрушки"
|
|
|
|
Гость
|
Гость ·
03-Июн-12 13:04
(спустя 15 мин., ред. 03-Июн-12 13:04)
supreme6666 писал(а):
здравствуйте, нигде не могу найти информацию про следующие команды, может поясните что это для чего и как использовать? и вообще нужно ли использовать?
setmtmode()
trim()
Distributor()
и еще хотелось бы узнать совет - есть допустим blu-ray - https://rutr.life/forum/viewtopic.php?t=1356016 там картинка с очень большой зернистостью на мой взгляд - стоит ли убирать эту зернистость и если стоит, то чем вообще рекомендуете такую зернистость убирать?
https://rutr.life/forum/viewtopic.php?t=3809575 - тут про Ависинт, и всё что может понадобиться.
http://avisynth.org/mediawiki/Main_Page/ru - справка по Ависинту.
ну например пресет
BD TemporalDegrain.avs
а если хочешь добиться неповторимого фирмового эффекта пластилиновой вороны, тогда типа
# a = last
fluxsmoothst(15,10)
# interleave(a,last)
|
|
|
|
george$t
Стаж: 14 лет 8 месяцев Сообщений: 4305
|
george$t ·
03-Июн-12 13:06
(спустя 1 мин.)
supreme6666
Вот подробный и доступный гайд по MT, составленный shark000X:
Краткий путеводитель по многопоточным режимам МТ
Краткий путеводитель по многопоточным режимам МТ
(по материалам http://avisynth.org/mediawiki/Internal_functions/Mu...eading_functions , http://avisynth.org/mediawiki/MT_support_page и на основе жизненного опыта. Предназначено для широкой аудитории, к формулировкам не придираемся).
На особенностях работы МТ с использованием настроек вида MT("фильтр",2,2) останавливаться не собираюсь, лучше разобраться с setmtmode, который не вызывает побочных эффектов при правильном его применении.
setmtmode(*, 4) - Вторая цифра после запятой определяет количество потоков, которые будут использоваться для обработки ВСЕГО скрипта (в данном примере - 4 ядра без НТ или 4 логических потока с НТ). Такую комбинацию имеет смысл использовать только в начале скрипта, поскольку при дальнейшей его работе количество потоков невозможно поменять. По этой причине в середине скрипта обычно встречается только setmtmode(*) с указанием только первой цифры, которой определяется режим работы МТ, т.е. "mode", о чем идет речь дальше:
setmtmode(1) - Самый быстрый режим, но работает только с некоторыми фильтрами, для которых специально предусмотрен, поэтому применяется крайне редко.
setmtmode(2) - Практически самый распространенный режим, работает с большинством фильтров. Под каждый фильтр выделяется отдельный поток ПРОЦЕССОРА (логический или физический), поэтому используется больше ресурсов оперативной памяти (иногда требуется тонкая настройка setmemorymax) для обслуживания очереди задач.
setmtmode(3) - Предназначен в первую очередь для фильтров, которые не работают нормально в mode 2. Позволяет разделять работу фильтра на несколько ВИРТУАЛЬНЫХ потоков внутри потока процессора. Работает медленней, чем setmtmode(2).
setmtmode(4) - Это комбинация двух режимов - setmtmode(2) и setmtmode(3) - удовлетворяющая, соответственно, требования подавляющего большинства фильтров. Недостатки: является одновременно медленным и требовательным к ресурсам памяти; может подвесить систему при использовании "жадных" фильтров, которые сами по себе (без фильтра МТ) создают несколько виртуальных потоков внутри потока процессора.
Теоретические размышления (цифры карикатурные): На 4-ядернике с НТ используется жадный фильтр, который в зависимости от поставленной задачи разделяет свои процессы на 2-20 виртуальных потоков. При максимальной загрузке 20 потоками в режиме setmtmode(2), процессор может распределить такую работу по свободным ресурсам сам, без помощи фильтра МТ. В режиме setmtmode(3) виртуальных потоков внутри одного потока процессора может создаться больше благодаря фильтру МТ (минимум 40, а то и все 80-100), процессор будет вынужден искать и выделять ресурсы остальных своих 7 потоков, ему уже становится тяжеловато. При включении setmtmode(4) может быть создано одновременно 40-100 виртуальных потоков жадного фильтра в каждом из свободных потоков процессора (т.е. 40...100 умножаем на 2...6). И куда дальше процессор будет распределять эти потоки?... И какого размера должен быть кэш процессора, чтобы совладать с очередью, растущей в геометрической прогрессии?
setmtmode(6) - Это модифицированная версия режима setmtmode(5) со всеми его недостатками и достоинствами, но работающая чуть-чуть быстрей.
setmtmode(5) - Самый медленный режим. Не устанавливает какие-либо ограничения, поэтому используется в основном перед критичными в этом вопросе загрузчиками медиа-источников. Предназначен для фильтров, не требующих линейного обслуживания фреймов (когда не требуется строгий порядок подачи фреймов: 0,1,2,...,последний). В связи с тем, что подавляющее большинство приложений предусматривает именно линейную подачу фреймов, загрузка процессора при setmtmode(5) обычно в несколько раз меньше, чем работа без МТ вообще, а в зависимости от поставленных задач обработка с setmtmode(5) может оказаться медленней, чем даже на стареньком 1-ядерном Атлон ХР (безо всяких МТ разумеется).
Следует отметить, что все обращения к скриптам Avisynth обрабатываются в обратной последовательности (снизу вверх). Таким образом, например, если составить такой скрипт:
setmtmode(2)
setmemorymax(1024)
source = last
super = source.MSuper(...)
.....
setmtmode(5)
Temporalsoften(...)
setmtmode(2)
ContraHD(last,source,...)
то ContraHD будет простаивать в ожидании Temporalsoften, а результаты работы MSuper и ContraHD мы получим не раньше, чем отработает свою задачу Temporalsoften в очень медленном режиме setmtmode(5).
В связи с тем, что обычно пользователю не известны устройство и внутренние алгоритмы работы фильтров (в частности, как именно они используют ресурсы компьютера), при использовании режимов setmtmode весьма благоразумным является измерение скорости работы скриптов с помощью сторонних утилит
(например, см. https://rutr.life/forum/viewtopic.php?p=52261630#52261630). При этом каждое изменение параметров setmtmode и setmemorymax проверяется на скорость выполнения (проверка занимает пару минут, после чего может быть прервана), после чего варианты настроек сравниваются и выбирается наиболее оптимальный. Такой подход позволяет сэкономить уйму времени.
Всем благ и мультипоточных успехов!
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
03-Июн-12 13:11
(спустя 4 мин.)
imgeorgest писал(а):
"Краткий путеводитель по многопоточным режимам МТ"
рекомендую обновиться -- исправлены несущественные неточности, добавлено краткое руководство по оптимизации
https://rutr.life/forum/viewtopic.php?p=52645524#52645524
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
03-Июн-12 16:41
(спустя 3 часа)
supreme6666 писал(а):
setmtmode()
включение многопоточности.
по англ. тут, тут и тут, по русски только из самой доки - тут
supreme6666 писал(а):
Distributor()
чего-то тоже связанное с многопоточностью. Скорее всего пытается распределить запросы кадров на разные потоки. Иногда используют, иногда нет. Определяется методом тыка сравнением производительности/нагрузки на проц.
|
|
|
|
Lenchik
Стаж: 18 лет 5 месяцев Сообщений: 854
|
Lenchik ·
03-Июн-12 17:14
(спустя 32 мин.)
unreal666 писал(а):
supreme6666 писал(а):
Distributor()
чего-то тоже связанное с многопоточностью. Скорее всего пытается распределить запросы кадров на разные потоки. Иногда используют, иногда нет. Определяется методом тыка сравнением производительности/нагрузки на проц.
http://avisynth.org/mediawiki/MT_modes_explained - много про него написано
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
03-Июн-12 18:16
(спустя 1 час 2 мин., ред. 04-Июн-12 00:31)
Lenchik
мельком смотрел ту страницу и не увидел скобок после Distributor, поэтому подумал, что там описывается какая-то внутренняя функция самого ависинта, не торчащая наружу.
ЗЫ.
На картинке Distributor() есть, а в самом скрипте у них он там не указан. Похоже раньше он всегда вызывался внутренне сам, а сейчас сделали внешним.
ЗЫ2.
Никто не делал тесты корректности работы внутренних фильтров ависинта в MT режиме?
Они нормально работают в SetMTMode(2)?
ависинт 2.60 MT.
ЗЫ3.
Вопрос тем, кто юзает ависинт 2.60 MT. Когда вы используете юзер. функции, которые юзают fft3dfiter, сколько потоков у вас выставлено в SetMTMode, какой его режим, какая версия fftw3 (версия + точность) и откуда взята/скомпилена?
А то пытаюсь включить для юзер функции MCTD (MCTDmod.avsi v1.4.20 mod3.6) SetMTMode(2, 8). Прога вылетает с ошибкой в fftw3 (v3.3.2 с оффсайта):
Цитата:
AVSMeter v1.17 by Groucho2004
AviSynth 2.60, build:May 16 2012 [03:31:34]
fftw: ../../kernel/alloc.c:269: assertion failed: p
This application has requested the Runtime to terminate it in an unusual way.
Please contact the application's support team for more information.
Завелась максимум на 5 потоках, но на 44-м кадре вылетела с кучей ошибок. На 4-х потоках кажется пашет, но это мало - нагрузка на проц всего 65% (что закономерно - 4/6*100).
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 02:26
(спустя 8 часов, ред. 04-Июн-12 02:26)
unreal666 писал(а):
А то пытаюсь включить для юзер функции MCTD (MCTDmod.avsi v1.4.20 mod3.6) SetMTMode(2, 8). Прога вылетает с ошибкой в fftw3 (v3.3.2 с оффсайта):
Цитата:
AVSMeter v1.17 by Groucho2004
AviSynth 2.60, build:May 16 2012 [03:31:34]
fftw: ../../kernel/alloc.c:269: assertion failed: p
This application has requested the Runtime to terminate it in an unusual way.
Please contact the application's support team for more information.
Завелась максимум на 5 потоках, но на 44-м кадре вылетела с кучей ошибок.
Если нужные для его работы плагины взяты отсюда -- MCTDmod_Requirements.7z http://forum.doom9.org/showthread.php?p=1559222#post1559222 -- то наборчик ентот весьма странный (сам автор ссылается на необходимость обновить самостоятельно Dither package), и в него почему-то входят только SSE3 версии RemoveGrain и Repair (хотя для конкретного компа могут больше подходить SSE2).
Отсюда http://forum.doom9.org/showthread.php?t=156028 можно попробовать "Modded Plugins Package" (там еще какой-то набор для тестирования появился, не пробовал). Из этой сборки не забываем поменять MVTools (для MCTD нужон), и конечно же закинуть fftw3.dll и libfftw3f-3.dll в системную папку винды.
Кроме того, рекомендую попробовать убрать разгон железа и установить щадящие тайминги памяти, если таковые были "накручены", а также проверить температурные режимы Аидой или подобной прогой. Также, судя по характеру ошибки, проблема может состоять в Microsoft Visual C++ (надо или доинсталлить все версии, или переустановить полностью весь пакет за все годы 2005-2008-2010, произведя предварительно корректное их удаление).
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 03:39
(спустя 1 час 12 мин., ред. 04-Июн-12 03:39)
shark000X писал(а):
и libfftw3f-3.dll в системную папку винды.
Кстати, в качестве fftw3.dll нужно юзать libfftw3f-3.dll (одинарной точности) или libfftw3-3.dll (двойной точности)? А то я двойной точности юзаю (новую).
ЗЫ.
Что-то судя по размеру, в тех пакетах старая версия fftw3 какая.
shark000X писал(а):
и в него почему-то входят только SSE3 версии RemoveGrain и Repair (хотя для конкретного компа могут больше подходить SSE2).
юзал как раз SSE3. попробовал SSE2 - та же фигня.
shark000X писал(а):
Также, судя по характеру ошибки, проблема может состоять в Microsoft Visual C++ (надо или доинсталлить все версии, или переустановить полностью весь пакет за все годы 2005-2008-2010, произведя предварительно корректное их удаление).
Еще бы знать какие, откуда скачивать и в каком порядке их обратно ставить, т.к. судя по "Программы и компоненты" Redistributable пакетов стоит 20 шшут + 2 Runtime + 1 Designtime.
shark000X писал(а):
Кроме того, рекомендую попробовать убрать разгон железа
ну LinX без проблем проходит тесты, хоть и температура в пике при 5 Гигах используемой памяти достигала аж 65°. Тайминги памяти не накручены, все равно от них мало толку.
shark000X писал(а):
а также проверить температурные режимы Аидой или подобной прогой.
Датчики аиды постоянно в трее висят. Сейчас при 4-х потоках теста - 51°.
ЗЫ2.
убрал разгон. Ошибка стала немного по другому описываться:
Цитата:
AVSMeter v1.17 by Groucho2004
AviSynth 2.60, build:May 16 2012 [03:31:34]
Avisynth: access violation at 0x0004232C in C:\Windows\system32\fftw3.dll
attempting to write to 0x00000020
уже попробовал разные версии fftw3 и плагинов. Один хрен.
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 06:05
(спустя 2 часа 25 мин., ред. 04-Июн-12 06:05)
unreal666
Цитата:
Кстати, в качестве fftw3.dll нужно юзать libfftw3f-3.dll (одинарной точности) или libfftw3-3.dll (двойной точности)? А то я двойной точности юзаю (новую).
fftw3.dll и libfftw3f-3.dll -- это один и тот же файл с разными названиями. Обозначение "fftw3" принято и существует специально для плагина fft3dfilter.dll, следовательно какой-либо "libfftw", переименованный в "fftw3" должен быть полностью совместимым с fft3dfilter.dll (дело в этом, а не в точности). Держать одновременно обе версии (libfftw3f-3.dll и libfftw3-3.dll, с такими названиями или переименованными в fftw3.dll) в системной папке винды не рекомендую категорически.
Цитата:
Microsoft Visual C++...
Еще бы знать какие, откуда скачивать и в каком порядке их обратно ставить, т.к. судя по "Программы и компоненты" Redistributable пакетов стоит 20 шшут + 2 Runtime + 1 Designtime.
Скачивать лучше прямо у мелкософта, потому что со сборками всякими приключаются проблемы (сам сталкивался не раз, и на форумах народ жалуется). Могу залить архив мелкософтовских Redistributable х86 на рапиду вместе с утилитой корректного удаления, чтобы не заниматься собирательством. Но надо посмотреть соответствующий скриншот "Программы и компоненты". Лить?
Цитата:
убрал разгон. Ошибка стала немного по другому описываться:
Цитата:
AVSMeter v1.17 by Groucho2004
AviSynth 2.60, build:May 16 2012 [03:31:34]
Avisynth: access violation at 0x0004232C in C:\Windows\system32\fftw3.dll
attempting to write to 0x00000020
по этому поводу пока точно сказать не могу, но похоже на попытку совместного использования fftw3.dll (разные вызовы), поэтому нужно еще и АВС-скрипт смотреть. Шо-та, коллега, Вы сегодня чудите не по-детски 
ПС: сорри, мне пора.
|
|
|
|
Pustovetov
Стаж: 17 лет 1 месяц Сообщений: 4255
|
Pustovetov ·
04-Июн-12 08:02
(спустя 1 час 57 мин.)
unreal666 писал(а):
fftw: ../../kernel/alloc.c:269: assertion failed: p
Произошел облом с выделением памяти или выделенная ранее память была кем-то "загажена". Памяти то хватает для запуска на 5 потоках? =)
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 12:52
(спустя 4 часа, ред. 04-Июн-12 12:52)
shark000X писал(а):
fftw3.dll и libfftw3f-3.dll -- это один и тот же файл с разными названиями.
ну я потому и спросил. Да и по самому вопросу было видно, что знаю.
shark000X писал(а):
Скачивать лучше прямо у мелкософта
да я сначала у них и хотел это сделать. Но при поиске хотя бы 2005 вылезло сразу несколько найденного: один старый за 2006 год и маленькая кучка каких-то сервис-паков, ATL и еще чего-то.
shark000X писал(а):
Могу залить архив мелкософтовских Redistributable х86 на рапиду вместе с утилитой корректного удаления, чтобы не заниматься собирательством.... Лить?
давай.
shark000X писал(а):
Но надо посмотреть соответствующий скриншот "Программы и компоненты".
shark000X писал(а):
поэтому нужно еще и АВС-скрипт смотреть. Шо-та, коллега, Вы сегодня чудите не по-детски
простейший:
скрытый текст
Код:
LoadPlugin(AviSynthToolsDir + "ffms\ffms2.dll")
LoadPlugin(AviSynthPluginsDir2 + "mvtools2.dll")
LoadPlugin(AviSynthPluginsDir2 + "FFT3dGPU.dll")
LoadPlugin(AviSynthPluginsDir2 + "RemoveGrainSSE3.dll")
LoadPlugin(AviSynthPluginsDir2 + "masktools2.dll")
LoadPlugin(AviSynthPluginsDir2 + "RepairSSE3.dll")
LoadPlugin(AviSynthPluginsDir2 + "degrainmedian.dll")
LoadPlugin(AviSynthPluginsDir2 + "HQdn3D.dll")
LoadPlugin(AviSynthPluginsDir2 + "Gradfun2db.dll")
LoadPlugin(AviSynthPluginsDir2 + "addgrainC.dll")
LoadPlugin(AviSynthPluginsDir2 + "fft3dfilter.dll")
#~ SetMemoryMax(1024)
SetMTMode(5, 8)
FFVideoSource("00014.mkv", threads=1)
SetMTMode(2)
MCTD(settings="very low")
SetMTMode(5)
crop(0, 140, 0, -140)
BlackmanResize(1280,534)
Distributor()
Pustovetov писал(а):
Памяти то хватает для запуска на 5 потоках? =)
физической памяти или виртуальной памяти (т.е. на x64 - 4Gb для x32 приложений)?
Если физической, то фиг его знает: на момент запуска свободно примерно 4,5-5 Гигов.
может ависинту не хватает виртуальной памяти для обработки FullHD-видео на стольки потоках с таким скриптом?
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 13:27
(спустя 34 мин., ред. 04-Июн-12 13:27)
unreal666 писал(а):
SetMTMode(5, 8)
FFVideoSource("00014.mkv", threads=1)
SetMTMode(2)
MCTD(settings="very low")
SetMTMode(5)
crop(0, 140, 0, -140)
BlackmanResize(1280,534)
Distributor()
Ээээх... Уважаемый коллега, на текущей страничке прямо перед Вашим первым постом ссылка https://rutr.life/forum/viewtopic.php?p=52645524#52645524 рекомендуется для внимательного прочтения.
На счет Visual C++ посмотрю позже, мне еще на землю вернуться надо 
ПС: да и еще, не понимаю какое ошибки в fftw3.dll имеют отношение к Distributor -- может без него лучше пробовать? И пока что напоследок: рекомендую не загружать в скрипте FFT3dGPU.dll, если не требуется его использование вместо обычного FFT3...
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 13:56
(спустя 29 мин., ред. 04-Июн-12 13:56)
shark000X писал(а):
Ээээх... Уважаемый коллега, на текущей страничке прямо перед Вашим первым постом ссылка
это я только сейчас воткнул для пробы. Раньше там SetMTMode вообще не стоял.
Да и ту статью я как раз прочитал перед использованием MT. Если бы не прочитал ее и посты дальше, то вообще бы дальше так и сидел на ST версии. Просто у меня MT версия без подгонки под определенный скрипт вообще не давала выигрыша, т.к. x264 запускался с 12 потоками.
Я себе ссылку на тот пост даже в ПМ отправил.
shark000X писал(а):
да и еще, не понимаю какое ошибки в fftw3.dll имеют отношение к Distributor -- может без него лучше пробовать?
пробовал и с Distributor и без. Один фиг.
shark000X писал(а):
И пока что напоследок: рекомендую не загружать в скрипте FFT3dGPU.dll, если не требуется его использование вместо обычного FFT3...
да это я его забыл убрать. Когда скрипт был однопоточным у меня он работал с MCTD(GPU=true, settings="very low")
|
|
|
|
pupss1
Стаж: 15 лет 5 месяцев Сообщений: 8
|
pupss1 ·
04-Июн-12 15:37
(спустя 1 час 40 мин., ред. 04-Июн-12 16:53)
Подскажите: я сжал при помощи MeGUI фильм с предварительной растановкой ключевых кадров и создал главы по этим кадрам, но при навигаци по галвам на железном плеере не попадаю на эти кадры. в чем может быть дело
скрытый текст
Video
ID : 2
Format : AVC
Format/Info : Advanced Video Codec
Format profile : High@L4.1
Format settings, CABAC : Yes
Format settings, ReFrames : 6 frames
Codec ID : V_MPEG4/ISO/AVC
Duration : 1h 17mn
Bit rate : 10 000 Kbps
Width : 720 pixels
Height : 576 pixels
Display aspect ratio : 4:3
Frame rate : 50.000 fps
Standard : PAL
Color space : YUV
Chroma subsampling : 4:2:0
Bit depth : 8 bits
Scan type : Progressive
Bits/(Pixel*Frame) : 0.482
Stream size : 5.27 GiB (96%)
Writing library : x264 core 120 r2164 da19765
Encoding settings : cabac=1 / ref=6 / deblock=1:-3:-3 / analyse=0x3:0x133 / me=umh / subme=10 / psy=1 / psy_rd=1.00:0.00 / mixed_ref=1 / me_range=48 / chroma_me=1 / trellis=2 / 8x8dct=1 / cqm=0 / deadzone=21,11 / fast_pskip=0 / chroma_qp_offset=-2 / threads=6 / sliced_threads=0 / nr=0 / decimate=1 / interlaced=0 / bluray_compat=0 / constrained_intra=0 / bframes=5 / b_pyramid=2 / b_adapt=2 / b_bias=0 / direct=3 / weightb=1 / open_gop=0 / weightp=2 / keyint=500 / keyint_min=46 / scenecut=40 / intra_refresh=0 / rc_lookahead=40 / rc=2pass / mbtree=1 / bitrate=10000 / ratetol=1.0 / qcomp=0.60 / qpmin=10 / qpmax=51 / qpstep=4 / cplxblur=20.0 / qblur=0.5 / ip_ratio=1.40 / aq=1:1.00
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 16:56
(спустя 1 час 19 мин., ред. 04-Июн-12 16:56)
unreal666
Так, подытожим:
1) Для Ависинт 2.6МТ последних сборок, все-таки лучше попробовать набор отсюда: http://forum.doom9.org/showpost.php?p=1568142&postcount=1126 -- размещаем в папке плагинов Ависинт и системной папке винды, при этом в системной папке удаляем какие-либо другие переименованные версии fftw3 и libfftw3;
2) Убираем разгон железа и ставим щадящие тайминги памяти;
3) Убираем из скрипта какие-либо другие фильтры, кроме MCTD, а для чистоты эксперимента вообще рекомендую использовать самый простой вариант прямого обращения к fft3dfilter.dll с тяжелыми настройками;
4) Убираем из скрипта загрузку каких-либо других плагинов, кроме разумеется необходимых для загрузки источника (FFT3dGPU.dll не загружаем!);
5) После загрузки источника с помощью SetMTMode(6,*) в скрипте проставляем SetMTMode(2) -- никак иначе;
6) Visual C++ пока не трогаем, ввиду нижеследующего:
Если всё вышеперечисленное выполнено в точности, но проблема продолжается, то она скорей всего вызвана неправильными обращениями к динамически распределяемой памяти (системка-то оказывается гибридная 64+32). ДЛЛки fftw3 и libfftw3 изначально предназначены для 32-битной системы (не знаю даже пытался ли кто-либо тестить их на 64-бит), может они и способны фунциклировать, но уже сейчас вижу что могут приводить к описываемым ошибкам по той причине, что в них отсутствует флаг-разрешение на обращение к памяти более 2 гигов, хотя такие запросы могут возникать. Такой же флаг отсутствует и у AVS.Meter. Я могу пропатчить AVS.Meter, fftw3 и libfftw3 соответствующим образом, но вопрос: Вы рискнете их тестить, или лучше обратитесь к разработчикам? Подчеркиваю: я не программист, поэтому не способен полностью проверить по коду их совместимость с 64-битной системой, мог бы только методом "тыка", но у меня все системы стоят 32-битные.
ПС: чисто логически предполагаю, что каких-то дополнительных проблем возникнуть не должно, поскольку:
а) сами фильтры будут использованы, как я понимаю, 32-битным Ависинтом;
б) скорей всего, проблема возникает по причине того, что работающие в 32-битном режиме фильтры обращаются тем не менее к памяти 64-битной винды, т.е. речь идет о доступной для обращений памяти в размере 4 гига и выше. Когда исполняемые приложения резервируют для своих нужд оперативку, то ячейки свободной виртуальной памяти конечно же фрагментируются, но при этом некоторые приложения (в данном случае возможно и наши фильтры) предполагают использование только нефрагментированной памяти, в результате чего возможна такая ситуация при доступной в системе памяти 8 гиг: ХХ00ХХХ0000Х0000
Х - это занятый объем, 0 - свободная память, каждый шаг по 500 метров (условно для наглядности). Таким образом получается, что приложению без упомянутого выше флага-разрешения будут видны-доступны только 1 гиг памяти (из выделенных зеленым), а для его нужд в действительности необходимо 2 гига, но остальные свободные ячейки ему просто не видны (выделено красным). Вобщем, вряд ли возникнут проблемы только из-за того, что мы установим флаг-разрешение, т.е. просто "откроем глаза" фильтрам и AVS.Meter.
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 17:17
(спустя 20 мин., ред. 04-Июн-12 17:17)
1) его и поставил, только с fftw3 и libfftw3 игрался: ставил и оттуда и с оффсайта.
2) уже убрал в биосе. Сейчас уже буду разгонять не через биос, а через прогу AMD OverDrive.
3) убрал тоже самое. Какие настройки fft3dfilter являются тяжелыми - не знаю. Но с настройками по умолчанию 8 потоков жует нормально. На 10 потоках вылазит тоже самое.
4) А это как влияет? Если функции плагинов не используются в самом скрипте, то все равно их в памяти нет, т.к. ависинт их выгружает после компиляции скрипта.
5) Попробовал - тоже самое.
а) правильно
б) фрагментация памяти не должна влиять, т.к. при частом гонянии ее на максимум она и так и так фрагментирована. Для приложений она все равно линейная и для x32 максимум выделяется 4Гб виртуальной памяти. А сколько там физической - вообще не имеет значения, т.к. ее может быть вообще мало, на то своп и существует.
При установке флага >2Гб на x32 системах прогам становится доступно 3Гб (выше 3 - адресное пространство системным либ), на x64 - кажется 4Гб (только не помню, куда там деваются системные либы).
ЗЫ.
Судя по тому, что в одиночку fft3dfilter работает нормально с 8 потоками, но валится также при большем кол-ве, то проблема именно в нем.
shark000X писал(а):
но уже сейчас вижу что могут приводить к описываемым ошибкам по той причине, что в них отсутствует флаг на использование памяти более 2 гигов, хотя такие запросы могут к ним поступать.
Сейчас только что сменил его прогой PEinsight. На 8 потоках стала ошибка, как на 6 - вылет со множеством окошечек. Но зато на 6 потоках стал работать нормально. Прогресс  (смена флага у либ никак не повлияла, да наверно у них он и не имеет значения. А вот смена у проги (AVSMeter), как раз повлияла)
ЗЫ.
Похоже больше уже ничего не сделаешь. Нехватка памяти на x32. Нужны все используемые в MCTD плагины для x64. Но некоторых из них просто не существует на x64. Да и фиг их перекомпилишь из-за присутствия там ассемблерных вставок.
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 18:17
(спустя 1 час, ред. 04-Июн-12 18:17)
unreal666
Цитата:
4) А это как влияет? Если функции плагинов не используются в самом скрипте, то все равно их в памяти нет, т.к. ависинт их выгружает после компиляции скрипта.
Это на всякий случай, чтобы по невнимательности составителя скрипта шой-то лишнее не запустилось 
Цитата:
При установке флага >2Гб на x32 системах прогам становится доступно 3Гб (выше 3 - адресное пространство системным либ), на x64 - кажется 4Гб
Совершенно верно, об чем и речь была, и таки действует как я понимаю, учитывая:
Цитата:
на 6 потоках стал работать нормально. Прогресс
а есть ли смысл больше потоков? или используется термоядерный монстр с продвинутой криосистемой?
Цитата:
Похоже больше уже ничего не сделаешь. Нехватка памяти на x32.
Возможно что и так, но если имеется еще привязка к библиотекам Visual C++, то в них за подобные ограничения отвечает параметр "memlock", его вроде тоже возможно пропатчить. Но это уже темный лес для меня, потому что с 64-битными системами активно не работал, не знаю как там уживаются одновременно или взаимозаменяются библиотеки C...
ПС: попробуйте все-таки пропатчить оба файла: fftw3 (только не в системной папке, и потом не перепутайте когда будете перемещать в системную) и fft3dfilter. Если флаг был только в одном из них, то улучшения не проявились в полной мере.
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 18:38
(спустя 20 мин., ред. 04-Июн-12 19:24)
shark000X писал(а):
а есть ли смысл больше потоков? или используется термоядерный монстр с продвинутой криосистемой?
Под разгоном LinX с 12 потоками разогревал проц до 65гр. Хоть и выше рекомендуемого максимума (62гр), но работало нормально без падений. А x264 максимум разогревал до 63гр. Да и я сейчас хоть и разогнал проц, но вольтаж стоит ниже, чем до этого ставил через биос.
shark000X писал(а):
попробуйте все-таки пропатчить оба файла
пропатчил. Ничего не изменилось. да и по идее не должно, т.к. диапазон адресации выделяется процессу, а не потоку либы.
PS.
- Для теста еще можно юзать avs2pipemod. Она уже пропатченная и у нее есть параметр -benchmark.
- Кстати, Distributor очень даже влияет на скорость. Без него кодирование идет как бы рывками (процесс время от времени подвисает на какое-то время) и скорость падает. На моем тесте с ним скорость 4,33 fps, без него - 2,85 fps.
|
|
|
|
supreme6666
Стаж: 17 лет 6 месяцев Сообщений: 76
|
supreme6666 ·
04-Июн-12 19:12
(спустя 34 мин., ред. 04-Июн-12 19:36)
народ выручайте - у меня 3 вопроса:
1. кто нить знает как сделать чтобы при кодировании прогой avs2yuv-0.24bm2\avs2yuv.exe выводилось оставшееся время до конца кодирования? - а то просто в x264 время показывается а через эту прогу не показывается?
и еще вопрос, кодирую с помощью все тоже прогой со следующими параметрами:
avs
скрытый текст
Код:
#setmtmode(5,4)
LoadPlugin("c:\Program Files (x86)\AviSynth 2.5\plugins\ffms2.dll")
LoadPlugin("c:\Program Files (x86)\AviSynth 2.5\plugins\mt_masktools-26.dll")
import("c:\Program Files (x86)\AviSynth 2.5\plugins\fslg_dither_to_n_bits.avs")
import("c:\Program Files (x86)\AviSynth 2.5\plugins\GradFun2DBmod151.avs")
FFVideoSource("video.mkv", threads=1)
#setmtmode(2)
crop( 0, 140, 0, -140)
Dither_convert_8_to_16 () # 8 => 16
GradFun2DBmod151()# тут дебандер
#Dither_Resize16(1280,532) # ресайз 16 => 16
fslg_dither_to_n_bits(10, outn=true) # 16 => 10
Dither_convey_yuv4xxp16_on_yvxx () # encode
x264
Код:
[spoiler]start /low /b /wait C:\encode\avs2yuv-0.24bm2\avs2yuv.exe -raw video.mkv.avs -o - | start /low /b /wait C:\encode\x264_2200_32_10bit\x264.2200kMod.10bit.x86.exe - --demuxer raw --input-depth 10 --input-res 1920x800 --fps 24000/1001 --preset placebo --crf 18 --deblock -3:-2 --no-mbtree --psy-rd 1.0:0.15 --no-fast-pskip --no-dct-decimate --no-mbtree --log-file encode.log -o iron-man-out.mkv
при этом выводится следующий лог
скрытый текст
Код:
raw [info]: 1920x800p 0:0 @ 24000/1001 fps (cfr)
x264 [info]: using cpu capabilities: MMX2 SSE2Fast SSSE3 FastShuffle SSE4.2 AVX
x264 [info]: profile High 10, level 5.0, 4:2:0 10-bit
x264 [info]: cabac=1 ref=16 deblock=1:-3:-2 analyse=0x3:0x133 me=tesa subme=11 p
sy=1 fade_compensate=0.00 psy_rd=1.00:0.15 mixed_ref=1 me_range=24 chroma_me=1 t
rellis=2 8x8dct=1 cqm=0 deadzone=21,11 fast_pskip=0 chroma_qp_offset=-3 threads=
6 lookahead_threads=1 sliced_threads=0 nr=0 decimate=0 interlaced=0 bluray_compa
t=0 constrained_intra=0 bframes=16 b_pyramid=2 b_adapt=2 b_bias=0 direct=3 weigh
tb=1 open_gop=0 weightp=2 keyint=250 keyint_min=23 scenecut=40 intra_refresh=0 r
c=crf mbtree=0 crf=18.0000 qcomp=0.60 qpmin=0 qpmax=81 qpstep=4 ip_ratio=1.40 pb
_ratio=1.30 aq=1:1.00
x264 [info]: started at Mon Jun 04 20:07:17 2012
video.mkv.avs: 3840x800, 24000/1001 fps, 181299 frames
2. вопрос - почему если я задаю размер - 1920х800 в логе фигурирует - 3840x800 ?
а если я в avs добавляю Dither_Resize16(1280,532) а в x264 добавляю --input-res 1280x532
то получается следующая картинка
3. в чем проблема кто нить может сказать?
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 20:06
(спустя 54 мин., ред. 04-Июн-12 20:06)
supreme6666 писал(а):
Dither_convey_yuv4xxp16_on_yvxx
при таком завершении скрипта имеется на выходе 16 бит, поэтому надо кодировщику указывать
--input-depth 16
ПС: и нельзя ли все эти "простыни" спрятать под спойлерами плиз?
ППС: упс, не заметил "fslg_dither_to_n_bits(10, outn=true) # 16 => 10", надо уточнять, поэтому вышесказанное пока не подтверждаю.
ПППС: видимо используется устаревший х264, нужно юзать билд не ниже r2164
|
|
|
|
Lenchik
Стаж: 18 лет 5 месяцев Сообщений: 854
|
Lenchik ·
04-Июн-12 20:16
(спустя 9 мин.)
10 бит там на выходе, если скрипт верный.
2 - ибо читайте инструкцию к dither, там увеличение размера вдвое, чтобы в 8 битн ависинт засунуть 16 бит.
3 - где-то косяк в скрипте, похоже на попытку из 16 бит преобразовать в 16.
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 20:23
(спустя 7 мин.)
Lenchik писал(а):
2 - ибо читайте инструкцию к dither, там увеличение размера вдвое, чтобы в 8 битн ависинт засунуть 16 бит.
А 10 бит как засовывается/высовывается? Увеличение размера на 25%?
|
|
|
|
Lenchik
Стаж: 18 лет 5 месяцев Сообщений: 854
|
Lenchik ·
04-Июн-12 20:35
(спустя 11 мин.)
Как засунуть в ависинт многобитный исходник без каких-либо потерь - не знаю. Могу предложить почитать http://avisynth.org/mediawiki/High_bit-depth_Support_with_Avisynth
Эту тему Машенька ковыряет, по её словам.
Внутри ависинта из 8 делается 16 бит на канал фактически увеличением размера, про это в описание а Dither плагину. Выплевывать из ависинта 10 бит через скрипт http://forum.doom9.org/showthread.php?p=1519194#post1519194
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 20:40
(спустя 4 мин.)
unreal666
ах да, запамятовал по запарке, вот обещанная подборка официальных Visual C++ х86:
https://rapidshare.com/files/3856644507/VC__.rar
они теперь не нада, как понимаю, но может пригодятся. Алгоритм установки простой:
1) Удаляем установленные в системе с помощью MSICUU2.EXE (установщик утилиты);
2) Перезагружаемся;
3) Ставим Visual C++ прямо в той последовательности, как проименованы файлы.
Каждая новая библиотека должна по идее поглощать предыдущую, создавая фейк последней и скрывая ее название из списка установленных программ.
|
|
|
|
supreme6666
Стаж: 17 лет 6 месяцев Сообщений: 76
|
supreme6666 ·
04-Июн-12 20:41
(спустя 1 мин.)
shark000X писал(а):
supreme6666 писал(а):
Dither_convey_yuv4xxp16_on_yvxx
при таком завершении скрипта имеется на выходе 16 бит, поэтому надо кодировщику указывать
--input-depth 16
ПС: и нельзя ли все эти "простыни" спрятать под спойлерами плиз?
ППС: упс, не заметил "fslg_dither_to_n_bits(10, outn=true) # 16 => 10", надо уточнять, поэтому вышесказанное пока не подтверждаю.
ПППС: видимо используется устаревший х264, нужно юзать билд не ниже r2164
ЮЗАЮ r2200
|
|
|
|
shark000X
Стаж: 14 лет 5 месяцев Сообщений: 434
|
shark000X ·
04-Июн-12 20:44
(спустя 3 мин., ред. 04-Июн-12 20:59)
supreme6666
сам не пробовал, но думается что бред> надо использовать функцию
fslg_dither_to_n_bits_out_n, а не fslg_dither_to_n_bits <бред, потому что в последней имеются DitherPost и fslg_dither_to_n_bits_out_16
"r2200" -- официальный или чья-то сборка? отдельным файлом или ffdshow?
|
|
|
|
unreal666
Стаж: 16 лет 11 месяцев Сообщений: 1713
|
unreal666 ·
04-Июн-12 20:46
(спустя 1 мин., ред. 04-Июн-12 20:46)
Lenchik
Я именно про преобразование в 10-бит из 8-ми внутри ависинта. Сам то ависинт 10 бит не поддерживает. Значит, по идее, где-то надо добавить инфу, как и для 16 бит.
Если бы у меня был бы набор этих плагинов/фильтров, я бы сам попробовал. Но у меня их нет. Пока не до них.
shark000X писал(а):
они теперь не нада, как понимаю, но может пригодятся.
пригодятся. У меня где-то один из них валятся. Как раз заменю сразу пакетом.
|
|
|
|
Yurasyk
Стаж: 16 лет 2 месяца Сообщений: 3506
|
Yurasyk ·
04-Июн-12 20:52
(спустя 5 мин., ред. 04-Июн-12 20:54)
unreal666 писал(а):
А 10 бит как засовывается/высовывается? Увеличение размера на 25%?
По хорошему засовывается только как 16-битная, а выводится точно так же, как 16-битная, но реально там 10 бит.
А если внутри ависинта получить 10 бит, то они делаются на основе 16-бит, т.е. 16-битная половинка дизерится с 8 до 2 бит, насколько я знаю.
|
|
|
|
supreme6666
Стаж: 17 лет 6 месяцев Сообщений: 76
|
supreme6666 ·
04-Июн-12 20:52
(спустя 47 сек., ред. 04-Июн-12 21:05)
shark000X писал(а):
supreme6666
сам не пробовал, но думается что надо использовать функцию
fslg_dither_to_n_bits_out_n, а не fslg_dither_to_n_bits, потому что в последней имеются DitherPost и fslg_dither_to_n_bits_out_16
"r2200" -- официальный или чья-то сборка? отдельным файлом или ffdshow?
вот эта http://komisar.gin.by/old/2200/x264.2200kMod.10bit.x86.exe от komisar666
fslg_dither_to_n_bits на думе прописывают в примерах
пробую другую версию ffms-2.17 может это поможет
|
|
|
|
