|
werfag
Стаж: 13 лет 5 месяцев Сообщений: 23
|
werfag ·
20-Дек-15 23:42
(9 лет 2 месяца назад, ред. 28-Дек-15 20:35)
Привет.
Переделал дамп из этой раздачи в старый формат этой раздачи: "ID форума";"Название форума";"ID раздачи";"Info hash";"Название раздачи";"Размер в байтах" без даты регистрации торрента.
Скачать
Все восемь: 20120919, 20130420, 20130907, 20131004, 20131208, 20140412, 20140519, 20140811.
Дамп 20120919=20121202.
При переделке попалось от создателей:
- данные разделены пробел||пробел, но попадается пробел|пробел и эта чёрточка встречается в названиях и иногда с пробелами;
- это a8749bc9502a71e4d15749cbe19b488869d426 отсюда не хватает двадцатки в конце.
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
20-Дек-15 23:48
(спустя 6 мин.)
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
20-Дек-15 23:50
(спустя 1 мин., ред. 21-Дек-15 02:59)
Небольшой фрагмент с названиями ДО файнридера:
скрытый текст
Секретный агент Макгайвер: Путь к концу света / Потерянные сокровища Атлантиды / MacGyver: Trail to Doomsday / Lost Treasure of Atlantis(Чарльз Кореллl, Майкл Веяр) [1994, США, Приключенческий боевик, DVD9 (Custom)] DVO + Original Eng
Manchester United: Official History 1878-2002 | Манчестер Юнайтед: Официальная История 1878-2002 [2007 г., Футбол, 3хDVDRip]
Giacomo Puccini - La Boheme / Джакомо Пуччини - Богема (Dan Ettinger, Anna Netrebko/Анна Hетребко, Jennifer Rowley, Joseph Calleja, Lucas Meachem, Simone Del Savio, Marco Vinco), Royal Opera House Covent Garden [10.06.2015, Opera, HDTVRip]
(Pop) Леонид Aгутин - Tайна склеенных страниц - 2013, MP3, 320 kbps
Деньги решают все / Money Talks (Бретт Рэтнер / Brett Ratner) [1997, США, Комедия, WEB-DLRip] MVOх2 + AVOх2 (Гаврилов, Живов)
(Pop/Rаp)[MC] [24/48] Час Пик (Куйбышев) и А.Астров Рэп - 1984, FLAC (image+.cue) | 372MB
(Score) Вдова с острова Сен-Пьер / La veuve de Saint-Pierre (by Pascal Estеve) - 2000, MP3 (tracks), 160 kbps
Демон полдня / 4 cерии из 4 / (Алексей Козлов) [2003 г., детектив, мелодрама, DVDRip]
Арбeкoвa, T.И. - Я хoчy и бyдy знaть aнглийcкий [2002 г., PDF, ENG]
Фоновые рисунки из аниме Blаck Lagoon, Fullmetal alchemist, Gunslinger girl.
Acтepикc и Oбeликc в Бpитaнии в 3Д / Аstеriх еt Оbеliх: Аu sеrviсе dе Sа Маjеstе 3D (Лоран Тирар / Laurent Tirard) [2012, комедия, приключения, семейный, BDrip, 1080p] OverUnder / Вертикальная стереопара
Авантюристка. Проигравший получaет всё(4 серии из 4) (Дмитрий Дьяченко) [2005 г., Приключения / Детектив, DVDRip]
(Hаrd'n'Heavy) Воплоти - Дискография - 2010-2015 (3 релиза) [MP3, 320 kbps]
ИpokeZ Ирокез - Панк-рок вне политики [2007 г., Punk, Camrip]
Два с половиной человека (2,5 человека) / Two and a Half Men (Сезон 3 / 1-24 из 24 серий) (Джеймс Уиддоуз, Роберт Берлингер / James Widdoe, Robert Berlinger) [2005-2006г., комедия, WEB-DLRip, 576x320] 2хRus, Eng + Sub (Eng)
Паранормальное явление 2 / Paranormal Activity 2 (Тод 'Кип' Уильямс / Tod 'Kip' Williams) [2010, США, ужасы, HDRip] [Unrated Сut] DUB
ОСТ 24.125.01-89 - ОСТ 24.159.26-89 Детали и сборочные единицы из сталей аустенитного класса для трубопроводов АЭС Dн=14-325 мм [1990, DjVu, RUS]
Вoеннo-статистическoе oбoзрение Рoссийской Империи, Том-09 Часть-2. Виленская губерния. [1848]
Электронные жучки / Bugs / Сезон 2 / Серии 1-10 (10) (Ken Grieve) [1996, Детектив, фантастика, DVDRip] (МногоTV)
GOALактика / Эфир от 19.12.2014 / НТВ+ [19.12.2014, Футбол, HDRip]
Картинг. ERDF 2011 Masters Kart. Berсy France. Day 1 [Esp 2, MPEG-PS, XviD, Рус.]
Принцесса Немертвых: Черная хроника / Shikabane Hime: Kuro (Мурата Масахико) [ТV-2] [1-12 из 12 + 2 спэшла] [без хардсаба] [RUS(int),JAP+SUB] [2009 г., приключения, мистика, DVDRip] | 7.27GB
Несносные медведи / Плохие новости, Медведи / Худшие в лиге / Разгромные медведи / Bad News Bears (Ричард Линклейтер / Richard Linklater) [2005, США, комедия, семейный, спорт, DVDRip] MVOх3
Девять жизней Нестора Махно 1-12(12) (Николай Каптан) [2006 г., Историческое кино, Драма, Сериал, Биографии, 3хDVD5]
[Журнал] Pоpular Patchwоrk - 7 номеров [PDF, ENG], обновлено 06.12.2014
МакSим - Не отдам [Золотой граммофон 2009] [2010 г., Pop, SATRip]
(Psycho Rap) Nейтральная Zона (Нейтральная Зона) — Клиника - 2007, FLAC (tracks+.cue), lossless
Бeлый Тигр (Карен Шахназаров) [2012, Военный, DVDRip] дополнительные материалы
Замки Шотландии. Замок Стерлинг / The Сastles of Scotland. The castle Stirling (Кен МакГрегор) [1998, Документальный, SATRip]
LIVEнь. Андрей Макаревич и Оркестр Креольского Танго [2012 г., Rock/Jazz, DVB]
Zero People (проект участников Animal ДжаZ) - Дискография - 2012-2014 (3 CD), FLAC (image+.cue), WavPack (iso.wv), lossless
Cними меня / Photo Kano (Ёкояма Акитоси) [TV] [2 из 12] [без хардсаба] [RUS(int), JAP] [2013 г., романтика, школа, комедия, HDTVRip] [720p] | 583MB
(Opera) Mozart. Don Giovanni. (Tito Gobbi, Ljuba Welitsch, Anton Dermota, Elisabeth Schwarzkopf etс) Choir der Staatsoper Wien • Wiener Philharmoniker - Wilhelm Furtwangler. Salzburg Festival. 1950. - 1986, APE (image+.cue), lossless . 3 CD BOX
Geological Society Мemoir №32 - Gee D.G., Stephenson R.A. (eds.) / Ги Д.Г., Стефенсон Р.А. (ред.) - European Lithosphere Dynamics / Литосферная геодинамика Европы [2006, PDF, ENG]
===========================================
Небольшой фрагмент с названиями ПОСЛЕ файнридера:
скрытый текст
Секретный агент Макгайвер: Путь к концу света / Потерянные сокровища Атлантиды / MacGyver: Trail to Doomsday / Lost Treasure of Atlantis(Чарльз Корелл1, Майкл Веяр) [1994, США, Приключенческий боевик, DVD9 (Custom)] DVO + Original Eng
Manchester United: Official History 1878-2002 Манчестер Юнайтед: Официальная История 1878-2002 [2007 г., Футбол, 3xDVDRip]
Giacomo Puccini - La Boheme / Джакомо Пуччини - Богема (Dan Ettinger, Anna Netrebko/Анна Нетребко, Jennifer Rowley, Joseph Calleja, Lucas Meachem, Simone Del Savio, Marco Vinco), Royal Opera House Covent Garden [10.06.2015, Opera, HDTVRip]
(Pop) Леонид Агутин - Тайна склеенных страниц - 2013, МРЗ, 320 kbps
Деньги решают все / Money Talks (Бретт Рэтнер / Brett Ratner) [1997, США, Комедия, WEB-DLRip] MVOx2 + AVOx2 (Гаврилов, Живов)
(Pop/Rap)[MC] [24/48] Час Пик (Куйбышев) и А.Астров Рэп - 1984, FLAC (image+.cue) 372MB
(Score) Вдова с острова Сен-Пьер / La veuve de Saint-Pierre (by Pascal Esteve) - 2000, MP3 (tracks), 160 kbps
Демон полдня / 4 серии из 4 / (Алексей Козлов) [2003 г., детектив, мелодрама, DVDRip]
Арбекова, Т.И. - Я хочу и буду знать английский [2002 г., PDF, ENG]
Фоновые рисунки из аниме Black Lagoon, Fullmetal alchemist, Gunslinger girl.
Астерикс и Обеликс в Британии в ЗД / Asterix et Obelix: Au service de Sa Majeste 3D (Лоран Тирар / Laurent Tirard) [2012, комедия, приключения, семейный, BDrip, 1080p] OverUnder / Вертикальная стереопара
Авантюристка. Проигравший получает всё (4 серии из 4) (Дмитрий Дьяченко) [2005 г., Приключения / Детектив, DVDRip]
(Hard1n'Heavy) Воплоти - Дискография - 2010-2015 (3 релиза) [МРЗ, 320 kbps]
MpokeZ Ирокез - Панк-рок вне политики [2007 г., Punk, Camrip]
Два с половиной человека (2,5 человека) / Two and a Half Men (Сезон 3 / 1-24 из 24 серий) (Джеймс Уиддоуз, Роберт Берлингер / James Widdoe, Robert Berlinger) [2005-200бг., комедия, WEB-DLRip, 576x320] 2xRus, Eng + Sub (Eng)
Паранормальное явление 2 / Paranormal Activity 2 (Тод 'Кип' Уильяме / Tod 'Kip' Williams) [2010, США, ужасы, HDRip] [Unrated Cut] DUB
OCT 24.125.01-89 - OCT 24.159.26-89 Детали и сборочные единицы из сталей аустенитного класса для трубопроводов АЭС Dh=14-325 mm [1990, DjVu, RUS]
Военно-статистическое обозрение Российской Империи, Том-09 Часть-2. Виленская губерния. [1848]
Электронные жучки / Bugs / Сезон 2 / Серии 1-10 (10) (Ken Grieve) [1996, Детектив, фантастика, DVDRip] (MhotoTV)
GOALaKTHKa / Эфир от 19.12.2014 / НТВ+ [19.12.2014, Футбол, HDRip]
Картинг. ERDF 2011 Masters Kart. Bercy France. Day 1 [Esp 2, MPEG-PS, XviD, Рус]
Принцесса Немертвых: Черная хроника / Shikabane Hime: Kuro (Мурата Масахико) [TV-2] [1-12 из 12 + 2 спэшла] [без хардсаба] [RUS(int),JAP+SUB] [2009 г., приключения, мистика, DVDRip] 7.27GB
Несносные медведи / Плохие новости, Медведи / Худшие в лиге / Разгромные медведи / Bad News Bears (Ричард Линклейтер / Richard Linklater) [2005, США, комедия, семейный, спорт, DVDRip] MVOx3
Девять жизней Нестора Махно 1-12(12) (Николай Каптан) [2006 г., Историческое кино, Драма, Сериал, Биографии, 3xDVD5]
[Журнал] Popular Patchwork - 7 номеров [PDF, ENG], обновлено 06.12.2014
MaKSnM - Не отдам [Золотой граммофон 2009] [2010 г., Pop, SATRip]
(Psycho Rap) Ыейтральная ZoHa (Нейтральная Зона) — Клиника - 2007, FLAC (tracks+.cue), lossless
Белый Тигр (Карен Шахназаров) [2012, Военный, DVDRip] дополнительные материалы
Замки Шотландии. Замок Стерлинг / The Castles of Scotland. The castle Stirling (Кен МакГрегор) [1998, Документальный, SATRip]
LIVEHb. Андрей Макаревич и Оркестр Креольского Танго [2012 г., Rock/Jazz, DVB]
Zero People (проект участников Animal Джаг) - Дискография - 2012-2014 (3 CD), FLAC (image+.cue), WavPack (iso.wv), lossless
Сними меня / Photo Капо (Ёкояма Акитоси) [TV] [2 из 12] [без хардсаба] [RUS(int), JAP] [2013 г., романтика, школа, комедия, HDTVRip] [720p] 583MB
(Opera) Mozart. Don Giovanni. (Tito Gobbi, Ljuba Welitsch, Anton Dermota, Elisabeth Schwarzkopf etc) Choir der Staatsoper Wien • Wiener Philharmoniker - Wilhelm Furtwangler. Salzburg Festival. 1950. - 1986, APE (image+.cue), lossless . 3 CD BOX
Geological Society Memoir №32 - Gee D.G., Stephenson R.A. (eds.) / Ги Д.Г., Стефенсон Р.А. (ред.) - European Lithosphere Dynamics / Литосферная геодинамика Европы [2006, PDF, ENG]
===========================================
Для интересующихся. Можно скопировать и проверить.
|
|
werfag
Стаж: 13 лет 5 месяцев Сообщений: 23
|
werfag ·
20-Дек-15 23:53
(спустя 2 мин., ред. 21-Дек-15 00:01)
Moriturus писал(а):
69567009werfag
но зачем?
Может кому-нибудь пригодится, и не возиться с html структурой.
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 00:01
(спустя 8 мин., ред. 21-Дек-15 00:01)
abizjanych
Заведомо провальный метод привёл к заведомо провальным результатам :о)
MpokeZ
GOALaKTHKa
Hard1n'Heavy
MaKSnM
Тод 'Кип' Уильяме
Ыейтральная ZoHa
LIVEHb
Астерикс и Обеликс в Британии в ЗД
Zero People (проект участников Animal Джаг) И это только то, что невооружённым взглядом видно. werfag
но ведь местные базы-то посвежее будут.
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
21-Дек-15 00:17
(спустя 16 мин.)
Цитата:
Заведомо провальный метод привёл к заведомо провальным результатам :о)
MpokeZ
GOALaKTHKa
Hard1n'Heavy
MaKSnM
Тод 'Кип' Уильяме
Ыейтральная ZoHa
LIVEHb
Астерикс и Обеликс в Британии в ЗД
Zero People (проект участников Animal Джаг) И это только то, что невооружённым взглядом видно.
Ну зачем так пессимистично?
В том-то и дело, что только невооружённым взглядом! Зато вооружённым PowerGREPом отлично видно, что:
Арбeкoвa, T.И. - Я хoчy и бyдy знaть aнглийcкий
Арбекова, Т.И. - Я хочу и буду знать английский
Acтepикc и Oбeликc в Бpитaнии в 3Д
Астерикс и Обеликс в Британии в ЗД
Вoеннo-статистическoе oбoзрение Рoссийской Империи
Военно-статистическое обозрение Российской Империи
(Pop/Rаp)[MC]
(Pop/Rаp)[MC]
[Журнал] Pоpular Patchwоrk
[Журнал] Pоpular Patchwоrk
Авантюристка. Проигравший получaет всё
Авантюристка. Проигравший получает всё
- несколько отличаются. А ведь остальные и так не искались. И это только на одной странице.
Кстати, в ходе "работ" обнаружилось, что в названиях подкатегорий тоже есть "рак", правда только в двух:
Photostoсks
и KXЛ
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 00:25
(спустя 7 мин.)
abizjanych
ну да, половину исправило, половину ещё больше изуродовало, замечательный результат.
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
21-Дек-15 00:37
(спустя 12 мин.)
Moriturus писал(а):
69567257abizjanych
ну да, половину исправило, половину ещё больше изуродовало, замечательный результат.
Но ведь мы же исходим из того, что кто-то будет искать по ключевым фразам "вслепую". И если хотя бы половина "глупых" ошибок будет исправлена, то это означает прирост количества раздач в результатах поиска. А это уже хорошо. Внешний вид второй половины ни на что не повлияет.
Цитата:
werfag
но ведь местные базы-то посвежее будут.
Кстати, в той базе (помнится) где-то 100000 дополнительных раздач, часть из которых ещё активна. Или это вместе с раздачей 2013 года? Сейчас у меня в таблице 2082323 уникальных хэшей. Но это конечно с перезалитыми.
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 00:55
(спустя 17 мин.)
Цитата:
Внешний вид второй половины ни на что не повлияет
Ну да, если человек хочет найти раздачу с MaKSиM, он её не найдёт, т.к. вы исходите из того, что «MaKSnM» это внешний вид, и ни на что не влияет. В принципе верно, нечего всякую низкосортную попсу слушать.
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
21-Дек-15 00:59
(спустя 4 мин., ред. 21-Дек-15 01:10)
Moriturus писал(а):
69567426
Цитата:
Внешний вид второй половины ни на что не повлияет
Ну да, если человек хочет найти раздачу с MaKSиM, он её не найдёт, т.к. вы исходите из того, что «MaKSnM» это внешний вид, и ни на что не влияет. В принципе верно, нечего всякую низкосортную попсу слушать.
А удастся ли с помощью формул полностью восстановить то, что было НАМЕРЕННО изменено с целью искажения информации, да ещё и случайными перестановками? Наверно нет. Точнее, уровень ошибок будет близкий к файнридерному. Его алгоритмы тоже не дураки писали.
Есть правда вариант: руками править. Но это не тот случай.
Можно ещё листать список и вручную удалять из него такие как "МакSим", "ИpokeZ", ещё до обновления основной таблицы. Быстрее будет, но тоже трудозатратно.
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 01:17
(спустя 18 мин.)
Как говорил господин sh_tk, правил всего два.
Цитата:
Его алгоритмы тоже не дураки писали.
Они его не для этого писали. Ваш Капитан Очевидность. Это даже глупо объяснять, так как ваши же результаты говорят сами за себя.
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
21-Дек-15 03:32
(спустя 2 часа 14 мин., ред. 21-Дек-15 04:06)
Цитата:
Они его не для этого писали. Ваш Капитан Очевидность. Это даже глупо объяснять, так как ваши же результаты говорят сами за себя.
Очевидно, что для этого тоже. Когда вы сканируете текст, программа распознавания должна определить, на каком языке текст, причём на уровне отдельных слов. Это ОДНА ИЗ ОСНОВНЫХ задач. Иначе (если бы похожие по виду знаки выбирались программой случайно) пришлось бы использовать ЕЩЁ ОДНУ программу для расшифровки RAW-абракадабры из знаков. Но такой программы в комплекте нет. КО.
И ещё: именно поэтому (для этого) в файнридере есть режим распознавания "русский+английский".
Может быть, в новых версиях (у меня восьмая) алгоритм распознавания улучшили. А ещё более древние действительно выдавали абракадабру даже в самых простых случаях. Так что прогресс на месте не стоит. Если придумаете лучшую формулу, вы его ускорите 
P.S. Как вариант борьбы с потерей информации (МакSим, ИpokeZ и проч.):
можно не замещать старые строки в таблице командой sort/uniq, а только добавить в неё комплект новых строк сверху или снизу. Всего ведь 3 мегабайта лишних! В начале поля "хэш" (я давно переделал его в "магнет-ссылку") этих дополнительных строк (до добавления их в общую таблицу) надо автоматом сделать какую-нибудь явную пометку, чтобы при сортировке по этому полю такие строки были отделены от основной массы. Таким образом, мы будем иметь "искабельные" названия из обоих источников, а если в поиске будут избыточные результаты, то это совсем не страшно при наличии особой пометы в этих дополнительных строках.
И овцы целы, и волки сыты.
Когда же появится более продвинутый вариант "распознавания" (а ведь он появится, не так ли?), то лишние строки можно будет с лёгкостью удалить.
Сам до таких алгоритмов пока умом не дорос...
|
|
KolAnVi
Стаж: 15 лет 10 месяцев Сообщений: 6
|
KolAnVi ·
21-Дек-15 11:47
(спустя 8 часов, ред. 21-Дек-15 11:47)
Обнаружил у себя в записках вот-такие ссылки на КНИГИ. Там были и другие, но те продолжают существовать на rutracker и их не привожу. Эти же ныне не существуют. Возможно - это списки книг, а потому они были удалены после разноса на раздельные раздачи.
В попытках схлопуть энтропию уже пробовал делать поиск и скачал первую базу rutracker, ту которая была зашифрована.
Через зауглом нашлось только по одной упоминание:
http://torrents.ru/forum/viewtopic.php?t=2289553
?Что-то про синтез частот и генераторы
Так что ласт чанс реквест на предмет что же там бУло! Да попадется мой пост на глаза администрации
|
|
Serdceglod
 Стаж: 14 лет 4 месяца Сообщений: 140
|
Serdceglod ·
21-Дек-15 16:07
(спустя 4 часа, ред. 21-Дек-15 16:59)
По ходу сайт закрыли.Зашёл через плагин Рутрекер.Через friGate тоже заходит.
|
|
Noerwei
Стаж: 15 лет 2 месяца Сообщений: 14
|
Noerwei ·
21-Дек-15 16:17
(спустя 9 мин.)
Ну все приплыли...Сегодня (21.12.2015 в 16:10 по МСК) cайт перестал открываться (см. скриншот --
, попытался зайти с помощью ZenMate (в Firefox) и...ОТКАЗ!. Открылся через сайт-анонимайзер cameleo.ru;Надеюсь, что все пути не закроют!Сейчас Tor не проверял, но я уверен более чем на 99.99% что он откроется.
|
|
liberstein1
 Стаж: 16 лет 5 месяцев Сообщений: 4
|
liberstein1 ·
21-Дек-15 16:48
(спустя 31 мин.)
А если все же и прикроют полностью доступ на сайт, наличие базы и магнет-ссылки как то спасет?
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 17:01
(спустя 13 мин., ред. 21-Дек-15 17:01)
Опять не разрешаются домены рутрекера.
Вот его адреса из личного запаса:
rutr.life 195.82.146.214
rutr.life 195.82.146.114
static.rutracker.cc 195.82.146.216
post.rutr.life 195.82.146.215 С ними прекрасно открывается.
|
|
Guest_2015
Стаж: 9 лет 2 месяца Сообщений: 22
|
Guest_2015 ·
21-Дек-15 17:14
(спустя 12 мин., ред. 04-Мар-17 10:05)
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
21-Дек-15 17:57
(спустя 43 мин.)
Опять не разрешаются домены рутрекера.
Вот его адреса из личного запаса:
rutr.life 195.82.146.214
rutr.life 195.82.146.114
static.rutracker.cc 195.82.146.216 С ними прекрасно открывается.
|
|
lazhu
Стаж: 14 лет 9 месяцев Сообщений: 97
|
lazhu ·
21-Дек-15 18:25
(спустя 27 мин.)
Работает rutr.life безо всяких извращений
|
|
Butodien
Стаж: 16 лет 10 месяцев Сообщений: 61
|
Butodien ·
21-Дек-15 18:38
(спустя 13 мин.)
Проблему с перемешанными латиницей и кириллицей в названиях можно решить автоматически, добавляя альтернативные написания проблемных слов в конец строки при индексации:
GOALактика ГОАЛактика GOALaktuka
При этом конечному пользователю выводить оригинальное название.
|
|
rail.001
 Стаж: 18 лет 9 месяцев Сообщений: 12
|
rail.001 ·
22-Дек-15 00:09
(спустя 5 часов)
сделали бы ролик через ОBS, что делать с этой базой, сразу же снялась бы куча вопросов
|
|
formazz
Стаж: 14 лет 6 месяцев Сообщений: 24
|
formazz ·
22-Дек-15 17:00
(спустя 16 часов)
что то все больше усложняеться
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
22-Дек-15 17:10
(спустя 10 мин., ред. 22-Дек-15 18:21)
Butodien писал(а):
69571070Проблему с перемешанными латиницей и кириллицей в названиях можно решить автоматически, добавляя альтернативные написания проблемных слов в конец строки при индексации:
GOALактика ГОАЛактика GOALaktuka
При этом конечному пользователю выводить оригинальное название.
То есть, вы предлагаете не присоединять к базе строки целиком (как я предложил), а попарно соединять только поля названий (оригинальное + распознанное)? Или хотите ввести дополнительное поле для распознанных названий? Что ж, в этом есть свой резон (экономия размера таблицы). И только чуть сложнее, чем со строками.
Или это был комментарий для программистов оболочек? Можно поподробнее?
P.S. Свой комментарий
https://rutr.life/forum/viewtopic.php?p=69565339#69565339
дополнил этой информацией.
|
|
mihsiz83
Стаж: 11 лет Сообщений: 8
|
mihsiz83 ·
22-Дек-15 21:36
(спустя 4 часа)
sh_tk писал(а):
69542717По-моему, там пара правил всего: латинская буква перед кириллической и наоборот.
Этого недостаточно. Например, не найдете такие случаи
Смерть c планеты Айтин / La morte viene dal pianeta Aytin / Snow Devil
Троих нужно убрать / Троих надо убрать / 3 hommes à abattre / Trois hommes а abattre
Однажды в Рождество / Once upon а Christmas
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
22-Дек-15 21:53
(спустя 17 мин.)
mihsiz83
Ну окей, вот ещё третье: ([а-я]\s[ас]\s[а-я])|([a-z]\s[ас]\s[a-z]) плюс-минус знаки препинания. Надо бы как-то до админов донести, чтобы в правила добавили запрет на такие фокусы. Только как?
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
22-Дек-15 22:18
(спустя 24 мин.)
mihsiz83 писал(а):
69579678
sh_tk писал(а):
69542717По-моему, там пара правил всего: латинская буква перед кириллической и наоборот.
Этого недостаточно. Например, не найдете такие случаи
Смерть c планеты Айтин / La morte viene dal pianeta Aytin / Snow Devil
Троих нужно убрать / Троих надо убрать / 3 hommes à abattre / Trois hommes а abattre
Однажды в Рождество / Once upon а Christmas
Удивительно, но FineReader все три исправил:
Смерть c планеты Айтин / La morte viene dal pianeta Aytin / Snow Devil
Троих нужно убрать / Троих надо убрать / 3 hommes à abattre / Trois hommes а abattre
Однажды в Рождество / Once upon а Christmas
Смерть с планеты Айтин / La morte viene dal pianeta Aytin / Snow Devil
Троих нужно убрать / Троих надо убрать / 3 hommes a abattre / Trois hommes a abattre
Однажды в Рождество / Once upon a Christmas
Видимо, в алгоритм зашиты простейшие конструкции типа предлогов из разных раскладок.
|
|
mihsiz83
Стаж: 11 лет Сообщений: 8
|
mihsiz83 ·
22-Дек-15 22:21
(спустя 3 мин., ред. 22-Дек-15 22:21)
Moriturus
Пар больше:
а - a
А - A
В - В
о - o
О - O
с - c
С - C
у - y Наконец могут быть целиком набраны слова в иной раскладке, "xop", "poca", "caxap" (английская раскладка) между словами в правильной раскладке И прочие, типа между словами разной раскладки присутствует не только пробел, но и другие небуквенные символы, а также цифры.
|
|
abizjanych
Стаж: 13 лет 11 месяцев Сообщений: 20
|
abizjanych ·
22-Дек-15 22:28
(спустя 6 мин.)
mihsiz83 писал(а):
69580063Moriturus
Пар больше:
а - a
А - A
В - В
о - o
О - O
с - c
С - C
у - y Наконец могут быть целиком набраны слова в иной раскладке, "xop", "poca", "caxap" (английская раскладка) между словами в правильной раскладке И прочие, типа между словами разной раскладки присутствует не только пробел, но и другие небуквенные символы, а также цифры.
Поэтому я и предполагал, что полностью ликвидировать эту энтропию - нереально.
|
|
Moriturus
 Стаж: 17 лет 4 месяца Сообщений: 421
|
Moriturus ·
22-Дек-15 22:39
(спустя 11 мин.)
mihsiz83
ну ок: ([а-я][\.\,]?\s[aocyx]\s[а-я])|([a-z][\.\,]?\s[аосуx]\s[a-z]), а извращений с хором, росой и сахаром в базе нет, но придумать конечно можно много таких. Повторюсь, ИМХО важнее как-то запретить такой бардак для новых торрентов, а это нужно как-то донести до админов.
|
|
|