[WT] [Архив] [Поиск] Главная Управление
[Совместно с Ычаном]
[Назад] [Вся нить] [Первые 100 сообщений] [Последние 50 сообщений]
Ответ в нить [Первые 100 сообщений]
Имя
Animapcha image [@] [?]
Тема   ( ответ в 6278)
Сообщение flower
Файл 
Пароль  (для удаления файлов и сообщений)
Параметры   
  • Прежде чем постить, ознакомьтесь с правилами.
  • Поддерживаются файлы типов 7Z, BZ, BZ2, GIF, GZ, JPG, MO, MP3, OGG, PDF, PNG, PSD, RAR, SVG, SWF, TXT, XCF, ZIP размером не более 10000 кБ.
  • Ныне 2344 unique user posts. Посмотреть каталог
  • Радио:
Файл: 132913516128.png-(3.55MB, 1342x1499, picurelated.png)
6278
No. 6278 watch    
2й тред ушел в блимит. Старый тред: 410chan.ru/dev/res/4777.html
Новый тред будет здесь.
imgbrd grabber: code.google.com/p/imgbrd-grabber/
nekopaw grabber: code.google.com/p/nekopaw/
Развернуть все изображения
No. 6303    
Файл: 13293912536.png-(153.19KB, 1680x1050, 2012-02-16-151305_1680x1050_scrot.png)
6303
>>6278
Будет ли многопоточность? У меня есть куча закладок с авторами с Pixiv`а. И я хотел бы скачать сразу все пикчи, разбрасывая их по папков с именами авторов, конечно.
Что-то подобное в версии 2 планируется? Ах да, если можно, то сделать подключение всех авторов из текстового файла какой-нибудь незаметной кнопочкой или комбинацией клавиш.
Спасибо.
No. 6304    
>>6303
Я думал над возможностью в один список закидывать один и тот же ресурс, но с разными параметрами. Но в первой альфе этого не будет, равно как и пиксива, к сожалению. Сделать более менее полный список наиболее важных борд планировал во 2м билде.

На счет выгрузки из списка - возьму на заметку. Что-нибудь вроде скриптового заполнения полей or somthing.
No. 6305    
Файл: 132939244835.jpg-(373.23KB, 800x800, 8cf4afea99f55fb1772985d50f534de5.jpg)
6305
>>6304
Спасибо за ответ.
>Но в первой альфе этого не будет, равно как и пиксива, к сожалению.
Надеюсь, во второй версии это будет. Почитал у вас на гуглкоде, что до выхода второй версии еще чуть-чуть. Будем ждать.
No. 6416    
Файл
удалён
Кажется гелбору успешно защищается от даунлодеров. Теперь вместо картинок скачиваются ошибки
No. 6417    
>>6416
Да нет, они просто на какой-то хрен переименовали каталог thumbs на thumbnails.
No. 6478    
Два вопроса, где кнопка Clear, и может ли граббер искать на эххентае именно по тегу, а не в поиске, т.к. в случае с коротким тегом выдаёт тысячи попаданий.
No. 6489    
>>6478
Крестик с боку рядом с autoscroll (да, надо бы уже подсказку поменять, ото уже куча времени прошла, как кнопки больше нет).
Нет, не может. Надо бы прикрутить.
No. 6490    
>>6478
Теперь умеет :3
No. 6492    
>>6490
Я тебя люблю. Только всё равно не помогло.
Тэг naz для примера:
http://exhentai.org/tag/naz
Даже в поиске по тэгу попаданий по слову naz много. Грабер можно заставить смотреть галереи именно по тэгу "naz", например брать галереи только с вышеприведенной ссылки?
No. 6493    
>>6492
Просто надо быть хитрее. Убираешь поиск по тегу, ставишь поиск по названию, пишешь [NAZ] - все те же галереи.

Просто по одному тегу поиск не предусмотрен, джа. И поисковая система хреново сделана, тупо, изоляция ключевых слов хоть и описана в вики, но не работает.
No. 6494    
>>6493
>И поисковая система хреново сделана, тупо, изоляция ключевых слов хоть и описана в вики, но не работает.
Имеется ввиду на е/эксхентае, а не в грабере, грабер такими вещами не занимается =_=
No. 6505    
Изменения интерфейса такие, что я не понимаю как скачивать пикчи. почему всё на инглише? почему нет нормального хелпа? Как скачать пикчи, блядь?
No. 6506    
Файл: 133184190723.jpg-(29.53KB, 640x479, 1322414563406.jpg)
6506
Охуеть, теперь значит надо идти в настройки на пункт меню

Save ===> Filename ===> Писать в строку %artist%/%copyright%/%character%/%md5%.%ext% после чего идти во вкладку Downloads ===> Add ===> Твой сайт и тег ===> В верхний пункт Filename опять вписывать эту окололесицу ===> И начинает скачивание.

Отлично, эталонный быдлокод. Это специально сделано, чтобы ньюфаг вообще ничего не мог скачать и надо разбираться 3 часа? Не получилось, я разобрался. Делай ещё сложнее, и ещё лучше сделать этот тред скрытым для всех кто написал менее 50 сообщений, и раздавать коды для активации программы. Так вообще будет заебись.
No. 6507    
>>6506
Господи, нет я наврал. Всё ещё сложнее. вписывать надо только %md5%.%ext% это типа имя файла и разрешение, иначе он будет генерить сотню папок.
No. 6509    
Файл: 133184320089.jpg-(69.50KB, 600x605, hazama_00_by_katzuxd-d38jaus.jpg)
6509
>>6506
Лол, бро, я уж подумал, что ты воаще наркоман, но вдруг понял, что ты не про кошкограббер.
Извини-извини.
Кстати, особых изменений в том граббере не заметил, в общем-то все примерно так же.
Тебе, кстати, вообще повезло, что на английском. Автор-то француз.
No. 6510    
Файл: 13318434869.jpg-(1.72MB, 1489x2000, 1322741849648.jpg)
6510
Я видимо наркоман всё же, я не по той ссылке скачал. Но даже я нормален, по сравнению с кодером грабера первой ссылки.
No. 6515    
Зачем в новой версии ключик, который появляется во время выбора бур?
Алсо, мелко, конечно, но все же: нет пикчи xbooru.
No. 6516    
>>6515
Алсо, как обозвать папку с тегом, по которому ищу? Что-то потыкал - нихрена не вышло.
No. 6519    
>>6515
Пока ни зачем. Прикрутил нормальную форму настроек, начал работу над сохранением индивидуальных настроек для каждой буры, что приведет к возможности сохранять логины и пароли для бур.

>>6516
Лол, я забыл этот ключик прикрутить, будет называться $tag$ в следующем релизе.
No. 6520    
>Алсо, мелко, конечно, но все же: нет пикчи xbooru.
Страннота, когда я делал иконки у хбуру был значек гелбуры, сейчас уже свой.
No. 6522    
Файл: 133192802150.jpg-(136.85KB, 750x1200, 25796352.jpg)
6522
Может при обновлении тоже прикрутить Ченджлог?
No. 6523    
>>6522
Надо, да все лень придумывать и реализовывать. К тому же ченжлог еще надо писать и дублировать в разных местах. Сделаю когда дойдут руки написать "генератор обновлений", руками что-то лень все это каждую обнову делать.
No. 6524    
Хотя, можно проще, надо просто что-то вроде rss-ки для новостей сделать, без привязки обновлений к определенным новостям.
No. 6533    
Файл: 133227816382.jpg-(18.32KB, 300x318, MOAR.jpg)
6533
можно ли исключить из граббинга е621, к примеру, тег gay или female? -female не работает
No. 6534    
>>6533
Не везде, где есть женщины и геи, стоит тег "женщина" и "гей". Проверил на "rating:s -rabbit -fox", все должно работать же.
No. 6535    
>>6524
Можно сделать и так: добавляем txt файл, который апдейтер будет выкачивать вместе с новой версией и потом через блокнот/другой_редактор/окошко_грабера будет его открывать. И в Граббере сделать пункт что-то типа "Показывать Changelog после обновления".
No. 6537    
Файл: 133233005636.jpg-(36.33KB, 1024x768, 769.jpg)
6537
http://rule34.paheal.net
В первой версии сломался. Почини
No. 6538    
Вопрос:
Если я самостоятельно буду редактировать профиль бурр, то я смогу добавлять гелборры и данбурры?

Вопрос номер 2:
Когда появятся профиль на Shimmie ?
No. 6539    
>>6538
1. Ты имеешь ввиду шаблоны? В общем-то, да, котограббер просто берет список всех *.cfg файлов из папки resources. Но api я еще не берусь описывать, т.к. еще пилить и пилить...

2. На текущий момент я сделал шаблоны для бур, у которых есть внешний api (gelbooru и danbooru), у shimmie я, по крайней мере, не смог нагуглить гайд по api (мб его нет?). Если можешь кинуть мне ссылку - буду рад. Парс по гуи буду делать когда доделаю все основные вещи (осталось авторизация и создание альбомов).
No. 6540    
>>6539
>шаблоны
конфиги, вестимо
No. 6550    
С пиксива часть альбомов не скачивается, например
http://www.pixiv.net/member_illust.php?mode=medium&illust_id=10273794
No. 6567    
Хочу сграбить с гелбуру картинки по одному тегу. Но проблема в том, что он грабит 1ю страницу.
No. 6570    
Вот тут еще бред, что граббер грабит максимум 10024 файла, притом что там находится больше картинок. В частности я про Touhou
No. 6574    
Файл: 133337410864.png-(96.83KB, 844x708, 02996ccd1d11a2fb2b35a379fe972dfd.png)
6574
Почему, я ставлю в фильтре, чтобы ширина была больше 3000, список заметно уменьшается, но если нажимаю "Начать закачку изображений", все равно качаются все 5800, игнорируя фильтр. Что я делаю не так?
No. 6575    
>>6574
>"Фильтр" включает настройку фильтра. В данный момент не влияет на закачку (т.е. качаться все равно будут все отмеченные галочкой).
Беда, беда.
No. 6587    
Файл: 133345076324.png-(464.65KB, 800x600, 12681623.png)
6587
В кабинете обвалился потолок, в результате чуть не убило человека (убило бы или сильно покалечило если бы не ушел на обед, лол).
//cool story mode off

Переехали в новое здание, так что скоро снова смогу делать фиксы и допилы в старом режиме.
No. 6588    
Файл: 133345209395.png-(186.45KB, 416x293, Безымянный.png)
6588
>>6567
>Graber 1.0.7.33
Бро, скачай новую версию, затесть, потом скажешь, чем все закончилось.
No. 6590    
Файл: 133346046836.jpg-(230.74KB, 500x706, 22017024_big_p10.jpg)
6590
>>6537>>6550
Проверил. Подтверждено. Исправлено.

Так же переименовал имоуту в яндере. Яндере работает по https, так что теперь для нее надо качать OpenSSL библиотеки.

1.1.0.17 http://goo.gl/ExV1q
No. 6591    
>>6590
Библиотеки скидывать в папку system32?
No. 6592    
>>6591
Можешь и туда, можно просто в папку с программой.
No. 6599    
>>6590
Как долго я ждал добавления yande.re. Спасибо.
No. 6622    
>>6590
Будет ли функция закачки PNG с яндере, коначана и других?
No. 6677    
> (kagami or kagamin or kagamine) -rin -len -ren star, категория: fanart/manga/digital
> поиск на DevianArt
> 1,625 most popular deviations of all time for tesla trooper
> составление листа в NekoPaw
> fanart/manga/digital/, page 68, 1573 pictures
Чому так?
No. 6678    
>>6677
Потому, что люди любят скрывать картинки (надпись типа "скрыто пользователем от общего доступа"), а в подсчете они все равно отображаются.
No. 6680    
>>6678
Спасибо.
No. 6713    
Вот как так я мог сломать возможность закачки в imgbrd-grabber с зерочана? Как же мне её теперь восстановить?
При попытке поиска пишет No result / Too many tags / Server offline
Стоит ли говорить что всё из вышеприведённого не правда, результы были до этого, тега всего два, а сервер точно уж онлайн.
No. 6727    
Файл: 133603818165.jpg-(229.74KB, 1065x792, 03a3399b00d1929b7a64f8831fd53358.jpg)
6727
>>6590
добавь пожалуйста фурраффинити?
No. 6731    
Подскажите как можно сграбить с fakku.net?
No. 6732    
Файл: 133609846476.jpg-(145.63KB, 402x500, Emma-emma-watson-87633_402_500.jpg)
6732
Стив, а есть ли какой нибудь способ грабить картинки с fanpop.com?
Вроде бы галереи вполне логично организованы например от
http://www.fanpop.com/spots/emma-watson/photos
до
http://www.fanpop.com/spots/emma-watson/photos/1113
Лучшее что смог найти это Bulk Image Downloader но он только превьюшки грабит.
No. 6733    
Файл: 133612891825.jpg-(255.33KB, 647x862, d31cfa9e940f785ed857386084413b1a.jpg)
6733
В 1.0 версии если только автор сам добавит.
в 2.0 надо раскуривать примеры шаблонов, на их основе можно сваять.

А автор что-то запропал.
No. 6737    
Файл: 133623058589.png-(70.22KB, 580x566, Безымянный.png)
6737
xbooru.com отвалилась? Картинки находит, но при скачивании выдает ошибки 404.
No. 6738    
Файл: 133623718344.png-(26.45KB, 708x203, [WhyNot] Gyo - OVA_mkv_snapshot_00_26_38_[2012_05_.png)
6738
Небольшой баг.

Удачи в разработке удобной 2.0
No. 6743    
Грабер №1 качает не все пикчи с понибуры, точнее не качает те изображения у которых рейтинг "Explicit", даже если вписать логин и пароль от аккаунта у которого стоит галка на показ данного контента.
No. 6744    
Файл: 13364268763.jpg-(132.96KB, 700x788, 1335547660275.jpg)
6744
>>6738
[b]>все[/b]
[b]Apr 3, 2012[/b]

Да ты ОХУЕЛ БЛЯ
БЫСТРА НА ГЛАВНУЮ ПИСАТЬ ПОЧЕМУ и когда вернешься
No. 6757    
когда вернется кодер-кун? хотет фурафинити!
No. 6778    
опчик вернись же молю! хочу фурафинити сграбить, а ручками пиздец невыносимо 3:
No. 6852    
Братюни, прикрепите animu.ru

Там всё элементарно.
No. 6860    
>>6852
сделай сам раз элементарно
No. 6880    
поднимаю
No. 6881    
Когда уже будут починены обрывы загрузки файл-листа с gelbooru?
No. 6882    
>>6881
Дай угадаю - список неожиданно обрывается и больше не обновляется? Как здесь >>6567
No. 6883    
Файл: 133847948528.jpg-(75.03KB, 549x411, cdb1a509a5c60afcaf82a8fa9bfbd982.jpg)
6883
>>6882
Ну вот, смотри.
Есть допустим %tagname%, по нему на гелбуре находит 20к картинок. Забиваю тег в граббер, нажимаю "Get", после чего прога находит 10к картинок и по тихому, без ошибки, останавливается. Запускаю второй раз через Full refresh - находит уже 12к картинок, после чего опять обрывается. И так раз 15 поиск останавливается в рендомном месте, пока наконец в один прекрасный момент не соизволит найти все 20к пикч [b]без единого разрыва[/b].
No. 6904    
бамп
No. 6909    
ОП, я не могу понять, как правильно скачивать этой штукой. Она не ставит расширение файла. А дописываешь %ext% в поле с именем файла, оно ругается, что я не смогу открыть файлы. ЧЯДНТ?
No. 6910    
Файл: 133873249663.png-(284.04KB, 1678x647, 04-06-2012-01-06-29-337.png)
6910
И пошто оно пропускает файлы?
No. 6911    
оп на всех забил
ушел, съебался, тред заброшен
смиритесь
No. 6914    
>>6909>>6910
Это даже не прога ОПа же.
В ОП посте лишь список самых "развитых" в плане граббинга прог, по сравнению с аналогами.
No. 6915    
>>6914
Точнее, прога ОПа идет 2м пунктом.
No. 6960    
Файл: 133965953629.jpg-(111.98KB, 1280x800, 0b21bc95cdf6bab342be7eb16f3cc118.jpg)
6960
жду 2.0b
No. 6961    
Файл: 133966943353.png-(1.23KB, 48x48, 25242641.png)
6961
>>6960
К 1й отметке дня рождения может дождешься.
No. 6962    
Случайно проходил мимо треда.
Данбору даунлоадер - это хорошо, это я сохранил. Но зачем изобретать велосипед для пиксива, когда давным-давно есть http://nandaka.wordpress.com/ ?
No. 6963    
Файл: 133968437335.png-(19.79KB, 834x600, slw.png)
6963
>>6962
где ж ты был 2 треда назад?

А вообще всегда приятнее запускать одни и ту же прогу чтобы делать одно и то же (качать картинки), а не разные для разных мест. Не говоря уже о том, что командная строка уже постарела.
No. 6964    
Файл: 133968906160.jpg-(217.47KB, 600x800, 653b59815ddd5c537ab5791055af4a3d444b177f.jpg)
6964
Активно скачиваю пикчи с бур и возникло два вопроса:
1. Возможно ли, теоретически, сделать, чтобы грабер конвертировал все png в jpg и проставлял им теги в метадату? Транспарентных картинок немного, но гораздо удобней будет искать файлы и не понадобятся всякие таблицы.
2. Может ли грабер сам определять рейтинг изображений и добавлять его к тегам? А то случайно 350к пикч перемешал, теперь заново качать придётся.
No. 6965    
>>6964
Сейчас хрен поймешь, кто про какую говорит. В этом треде периодически говорят о одной из 3х - imgbrd-grabber, graber 1.0, graber 2.0 (nekopaw). Какую же из них имел ввиду ты?
No. 6975    
Файл: 133975112754.png-(458.86KB, 818x1000, ac6b34e8ac988cadbb0165ba166b9781.png)
6975
>>6965
Мне некопашка нравится, но с такими-то функциями готов на любой пересесть.
Впрочем, самостоятельно конвертировать пикчи тоже не проблема, но, опять же, загвоздка, как перенести теги из таблицы в свойства файла. Так что лучше встроенный в грабер преобразователь.
No. 7027    
Файл: 134012434397.png-(253.00KB, 850x730, cirno.png)
7027
Вопрос немного не по теме, но все же: вот через api booru-подобных движков можно получить рейтинг картинки (safe/questionable/explicit). А можно при запросе через сайт отобразить по тегам картинки с определенным рейтингом?
No. 7031    
>>7027
как получить страницу через api знает, а поисковых команд не знает
http://donmai.us/help/cheatsheet
>rating:questionable (или просто rating:q)
No. 7032    
Файл: 134013924543.jpg-(130.20KB, 593x902, cir.jpg)
7032
>>7031 Ох спасибо огромное! В хелпе на gelbooru такого не нашел
з.ы. А api немного помню, так как писал в свое время свой граббер с преферансом и блудницами, на шарпе. Но в итоге забил
No. 7034    
На гелбуре тоже есть же, плохо искал
http://gelbooru.com/index.php?page=help&topic=cheatsheet
No. 7069    
Лучей добра ОП-у. Скачал паки со своей вайфу с пиксива и данбуры его неколапой. Годнота.
No. 7087    
Файл: 13404613869.jpg-(131.47KB, 665x473, foto001.jpg)
7087
Господа, а что с exhentai\g.e-hentai?

По разному экспериментировал с интервалами,постоянно спотыкается после 5\10 картинок:
>Connect timed out.

Может неправильно что делаю.
No. 7088    
А я вот писал парсер гелбуры на баше, вполне работает - http://pastebin.com/TXGfZFNX
./gelbooru.sh "теги" "куда складывать пикчи"
No. 7089    
>>7088
Няшно. Но есть же danbooru-grabber с PKGBUILD'ами и ебилдами, правда он монструозный как слон.
No. 7090    
>>7087
Для ехентая это в порядке вещей, они для раздачи пикч используют "волантеров", ака предоставляющих свои компы для размещения пикч на своих винтах. Таких желающих очень дохрена (т.к. дают бонусы), а интернеты у большинства - говно. Поэтому и скачка с них - говно. Если сейчас лагает - скачай позже. Ссылки обновятся.
No. 7097    
>>7089
Мне хотелось попробовать попарсить хмл, чтобы меня не стошнило, я выбрал хмл с двухмерными няшками. Да и написание скрипта заняло не сильно больше времени, чем я бы потратил на гугл и чтение мана.
No. 7099    
>>7097
Я тоже писал danbooru grabber на bash :3. Он работал, но был гораздо примитивнее твоего. Перешёл на готовое решение, благо даже пакет есть.
No. 7100    
>>7099
P.S. Только я его делал, чтобы научился работать с регулярками, какой треш угар и содомия там были, можешь сам представить.
No. 7104    
>>7088
Только заметил, что кусок строки не скопипастил. 33 строчка должна оканчиваться на
-n | while read url; do
, а не на
-n$
.

>>7099
У меня по сути он тоже довольно примитивный, просто в цикле запрашивает страницу с пикчами по тегу и выкачивает с нее все. Больше занимает проверка на установленные зависимости хотя тоже сделано слегка криво. Там еще и первая страница два раза грузится, от чего можно избавиться. Но это уложнит скрипт, поэтому сейчас добавил просто &limit=0. Вот исправленная версия - http://pastebin.com/1akFtyfR

>>7100
Регулярками парсить хмл это то еще мучение, да.
No. 7166    
так оп-то где? жив вообще?
No. 7167    
>>7166
а чего хотел-то?
No. 7180    
>>7167
фуррафинити хочу чтобы добавил
No. 7185    
>>7167
кстати почему ограничение на e621 стоит в 1000 страниц? можно ли поправить?
No. 7186    
>>7180
у фуррафинити тут дооолгая история. Его геморройно реализовать как в 1й версии, так и во 2й. В прочем, до выхода 2.0.2, думаю, будет добавлен.
>>7185
Исправил.
No. 7188    
>>7186
исправил...а где взять? когда выложишь?
>В прочем, до выхода 2.0.2, думаю, будет добавлен.
примерные сроки какие?
No. 7190    
>>7188
во 2й версии это называется "автоматические обновления".
>примерные сроки какие?
ДО того (или, возможно, одновременно), как будет реализована альбомная группировка. Джа, это самый точный срок, точнее сказать затрудняюсь.
No. 7191    
>>7190
спасибо
тогда жду ФА
No. 7203    
>>7190
Еще можно исправить ponibooru, а именно совсем убрать, ибо сайт скоро закроется, вроде как derpiboo.ru стал его наследником.
No. 7206    
>>7203
Какой-то буру-на-рельсах. Еще что-то новое.
No. 7221    
>>7206
Оригинальный движок данбуры на рельсах же.
424 сообщений пропущено. Показаны 100 первых сообщений. [Назад] [Вся нить] [Первые 100 сообщений] [Последние 50 сообщений]

Удалить сообщение []
Пароль  
[Mod]