Gentoo Forums
Gentoo Forums
Gentoo Forums
Quick Search: in
deltup поломался
View unanswered posts
View posts from last 24 hours

Goto page Previous  1, 2, 3  Next  
Reply to topic    Gentoo Forums Forum Index Russian
View previous topic :: View next topic  
Author Message
KCh1
n00b
n00b


Joined: 10 Nov 2005
Posts: 35

PostPosted: Fri Jun 02, 2006 7:02 pm    Post subject: Reply with quote

а что на это можно сказать
Code:
You have configured getdelta.sh not to accept this queue-position.

Что делтап снова заработал, так тогда что не в порядке с настройками?
Back to top
View user's profile Send private message
Azik
Tux's lil' helper
Tux's lil' helper


Joined: 03 Apr 2005
Posts: 149
Location: Russia, Ufa

PostPosted: Sat Jun 03, 2006 8:09 am    Post subject: Reply with quote

Хехе, нет, это форма вежливого посыла куда подальше
Мне queue-position выдавался за номером >1000 (ага, типа столько там клиентов в очереди сидят, верю). Если в настройках изменить длину ожидаемой очереди, то можно ждать до второго пришествия, очередь ничуть не продвигается. А дельты кем-то все же делаются...
Back to top
View user's profile Send private message
KCh1
n00b
n00b


Joined: 10 Nov 2005
Posts: 35

PostPosted: Tue Jun 06, 2006 5:11 am    Post subject: Reply with quote

Волки. Одно слово, а так было хорошо!
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sat Jul 08, 2006 2:26 pm    Post subject: Reply with quote

KCh1 wrote:
Волки. Одно слово, а так было хорошо!


Я написал Nicolai Lissner письмо, он ответил:

> Is deltup network no more maintained?

Does an error mean something is not maintained. I'm just do not use the
deltup-server by myself at the moment, therefore the usability of the server
depends on messages like yours when it obviously does not run correctly
anymore. I hope I fixed that now. Thanks!

Я попробавал и написал ещё раз:

Seems it's not fixed. :( For different requests different queue size
and queue position is the same as yesterday:

Он ответил:

again i hope it is fixed now. the sever swapped several hundred mb and got
*extremely* slow while trying to create a dtu for openoffice 2.0.1->2.0.2
it simply does not have enough ram to do that. I have stopped that nonsense
and have reset the queue. so it should work (except for openoffice, which might
block it again)

Я написал ещё раз:

I have tryed to download dtu for amule right after reveived your email.
I got queue pos. 179 and its not decreased during one hour.

Can you please take a look on server again?

Ответа пока не было.

Складывается впечатление, что он не забил на deltup, но просто сейчас ему не до того. Он отвечает, но отвечает с большими промежутками. И возник у меня вопрос, а все[/quote] те, кто ругались в этом топике, пробовали написать автору?
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Sun Jul 09, 2006 12:27 pm    Post subject: Reply with quote

есть отличный проект при непоследнем участии нашего модератора
http://www.rugentoo.org/draft/yad/
я спрашивал о готовности сервера, ответили, что техническая альфа готова, но у разработчиков мало времени на доводку продукта
придётся подождать немного :)
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sat Jul 15, 2006 8:11 pm    Post subject: Reply with quote

fank wrote:
есть отличный проект при непоследнем участии нашего модератора
http://www.rugentoo.org/draft/yad/
я спрашивал о готовности сервера, ответили, что техническая альфа готова, но у разработчиков мало времени на доводку продукта
придётся подождать немного :)


Изобретают очередной велосипед.

Моя переписка с Nicolai Lissner успешно завершилась, deltup теперь работает. В ходе переписки были исправлены баги.
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Sun Jul 16, 2006 8:04 am    Post subject: Reply with quote

Quote:
deltup теперь работает

вовсе нет
Code:
Trying to download wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu

--11:18:21--  http://linux01.gwdg.de/~nlissne/deltup.php?have=wine-0.9.9.tar.bz2&want=wine-0.9.17.tar.bz2&url=http://kent.dl.sourceforge.net/sourceforge/wine/wine-0.9.17.tar.bz2&version=0.7&time=1153037901
           => `deltup.php?have=wine-0.9.9.tar.bz2&want=wine-0.9.17.tar.bz2&url=http:%2F%2Fkent.dl.sourceforge.net%2Fsourceforge%2Fwine%2Fwine-0.9.17.tar.bz2&version=0.7&time=1153037901'
Resolving linux01.gwdg.de... 134.76.13.21
Connecting to linux01.gwdg.de|134.76.13.21|:80... connected.
HTTP request sent, awaiting response... 302 Found
Location: http://134.76.13.21/~nlissne/deltas/wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu [following]
--11:18:26--  http://134.76.13.21/~nlissne/deltas/wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu
           => `wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu'
Reusing existing connection to linux01.gwdg.de:80.
HTTP request sent, awaiting response... 404 Not Found
11:18:28 ERROR 404: Not Found.

The dtu could not be fetched, downloading full file from original URL


хотя какие-то положительные сдвиги наметились

Quote:
Изобретают очередной велосипед.

у которого будут крутиться колёса, причём в нужную сторону :D
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sun Jul 16, 2006 8:08 am    Post subject: Reply with quote

fank wrote:
Quote:
deltup теперь работает

вовсе нет
Code:
--11:18:26--  http://134.76.13.21/~nlissne/deltas/wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu
           => `wine-0.9.9.tar.bz2-wine-0.9.17.tar.bz2.dtu'
Reusing existing connection to linux01.gwdg.de:80.
HTTP request sent, awaiting response... 404 Not Found
11:18:28 ERROR 404: Not Found.

The dtu could not be fetched, downloading full file from original URL


хотя какие-то положительные сдвиги наметились


У меня нет 0.9.9, не могу проверить. Дельта с 0.9.12 забралась нормально. Напишешь письмо? Nicolai Lissner <nlissne/linux01/gwdg/de>

fank wrote:
Quote:
Изобретают очередной велосипед.

у которого будут крутиться колёса, причём в нужную сторону :D


Вот когда напишут, захостят и это будет работать... А так, пока лучше синица в руках.
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Sun Jul 16, 2006 8:58 am    Post subject: Reply with quote

Quote:
У меня нет 0.9.9, не могу проверить. Дельта с 0.9.12 забралась нормально.

с 0.9.16 тоже не сработало
а 0.9.12 ток что удалил :(
Quote:
Напишешь письмо?

дык кабы знать мне инглишь в нужном объёме, разве же не написал бы я раньше?
или ток лог ему послать достаточно?
это совсем старый баг, самый тупой, имхо

а что там с объёмом памяти на серваке? неужто дельты оффиса у нас не будет?
Quote:
Вот когда напишут, захостят и это будет работать... А так, пока лучше синица в руках.

кто же спорит :D
впрочем, сырцы есть и потестить можно и самому
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sun Jul 16, 2006 5:13 pm    Post subject: Reply with quote

fank wrote:
Quote:
У меня нет 0.9.9, не могу проверить. Дельта с 0.9.12 забралась нормально.

с 0.9.16 тоже не сработало
а 0.9.12 ток что удалил :(
Quote:
Напишешь письмо?

дык кабы знать мне инглишь в нужном объёме, разве же не написал бы я раньше?
или ток лог ему послать достаточно?
это совсем старый баг, самый тупой, имхо


Я пошлю просто лог, напишу, что эта проблема опять вылезла.

fank wrote:

а что там с объёмом памяти на серваке? неужто дельты оффиса у нас не будет?


Не знаю, надо попробовать. В крайнем случае опять всё ляжет. :)
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sun Jul 16, 2006 5:37 pm    Post subject: Reply with quote

fank wrote:
Quote:
У меня нет 0.9.9, не могу проверить. Дельта с 0.9.12 забралась нормально.

с 0.9.16 тоже не сработало
а 0.9.12 ток что удалил :(


Написал, вот ответ:

Quote:
hmm... I didn't expect it would happen again. fixed now and added an
additional line that checks for files in index not existing anymore.
Its a quick and dirty solution, I should search the cause of the problem,
but this is better than wrong entries in the index files.


Попробуй, если ли ещё проблема.
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Tue Jul 18, 2006 6:02 am    Post subject: Reply with quote

теперь всё ок!
СПАСИБО!!!
Back to top
View user's profile Send private message
infernoman
n00b
n00b


Joined: 23 Jun 2005
Posts: 18

PostPosted: Thu Jul 27, 2006 12:35 pm    Post subject: Re: deltup поломался Reply with quote

А что сейчас за фигня с дельтапом? Почему-то все время очередь забита и добиться дельты просто нереально.
Куда там писать надо?
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Thu Jul 27, 2006 12:45 pm    Post subject: Re: deltup поломался Reply with quote

infernoman wrote:
А что сейчас за фигня с дельтапом? Почему-то все время очередь забита и добиться дельты просто нереально.
Куда там писать надо?


Добиться дельты реально. Да очередь большая, да дельты делаются медленно, иногда надо ждать несколько дней, пока твоя дельта будет сделана. Но дельты делаются и очередь идёт.

Единственное "но": сейчас если дельта для какого-то файk не может быть сделана (например, невозможно получить старую или новую версию файла), то failed состояние не запоминается, как было раньше. Т.е. если у тебя на одном и том же файле queue pos был, например, 325, а через некоторое время не уменьшился, а наоборот увеличился, то скорее всего сервер не смог создать дельту.
Back to top
View user's profile Send private message
infernoman
n00b
n00b


Joined: 23 Jun 2005
Posts: 18

PostPosted: Thu Jul 27, 2006 5:18 pm    Post subject: Re: deltup поломался Reply with quote

А про русские дельтапы ничего не слушно? Все везде заглохло?
Скрипт ведь написать -- на пол дня задача.
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Thu Jul 27, 2006 5:20 pm    Post subject: Re: deltup поломался Reply with quote

infernoman wrote:
А про русские дельтапы ничего не слушно? Все везде заглохло?
Скрипт ведь написать -- на пол дня задача.


А смысл? Зачем писать, если уже есть и работает? К тому же дело не только в написать, дело в захостить.
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Sat Aug 12, 2006 7:22 am    Post subject: Reply with quote

Quote:
К тому же дело не только в написать, дело в захостить.

вот как раз с этим проблем быть и не должно, по словам azik'a

вот ещё 2 бажика:

Code:
>>> Downloading 'ftp://gd.tuwien.ac.at/opsys/linux/alsa/lib/alsa-lib-1.0.12rc1.tar.bz2'
Searching for a previously downloaded file in /usr/portage/distfiles

We have following candidates to choose from
alsa-lib-1.0.10.tar.bz2
alsa-lib-1.0.11rc2.tar.bz2
alsa-lib-1.0.11rc3.tar.bz2
alsa-lib-1.0.11rc5.tar.bz2
alsa-lib-1.0.11.tar.bz2
alsa-lib-1.0.12rc1.tar.bz2

The best of all is ... alsa-lib-1.0.12rc1.tar.bz2

Checking if this file is OK.

Trying to download alsa-lib-1.0.12rc1.tar.bz2-alsa-lib-1.0.12rc1.tar.bz2.dtu

--07:10:36--  http://linux01.gwdg.de/~nlissne/deltup.php?have=alsa-lib-1.0.12rc1.tar.bz2&want=alsa-lib-1.0.12rc1.tar.bz2&url=ftp://ftp.iasi.roedu.net/pub/mirrors/ftp.alsa-project.org/lib/alsa-lib-1.0.12rc1.tar.bz2&version=0.7&time=1155355836
           => `deltup.php?have=alsa-lib-1.0.12rc1.tar.bz2&want=alsa-lib-1.0.12rc1.tar.bz2&url=ftp:%2F%2Fftp.iasi.roedu.net%2Fpub%2Fmirrors%2Fftp.alsa-project.org%2Flib%2Falsa-lib-1.0.12rc1.tar.bz2&version=0.7&time=1155355836'
Connecting to 127.0.0.1:3128... connected.
Proxy request sent, awaiting response... 302 Moved Temporarily
Location: http://134.76.13.21/~nlissne/INVALID_REQUEST [following]
--07:10:36--  http://134.76.13.21/~nlissne/INVALID_REQUEST
           => `INVALID_REQUEST'
Connecting to 127.0.0.1:3128... connected.
Proxy request sent, awaiting response... 404 Not Found
07:10:36 ERROR 404: Not Found.


немножко пояню, то сходу может быть непонятно
скрипт зацикливается бесконечно пытаясь слить дельту для пакетов одной версии, в результате - INVALID_REQUEST, правильно выдаётся скриптом
это происходит потому, что после успешного накладывания патча размер файла не совпадает с оригинальным, он вроде всегда меньше, поэтому клиент получает _однозначную_ задачу докачать файл и снова вызывается клиент(действующий как wrapper) с задачей слить файл вот с таким странным названием
клиент имеется в виду - getdelta.sh
ну и т.д.

а второй следует из первого: множественные несовпадения дайджестов
кде обновить - сущий кошмар, дельта сливается нормально, патч накатывается.... и crc md5 не совпадает...
проверено сразу после sync процедуры...

надеюсь, понятно объяснил

кто напишет баг-репорт? :wink:
а то, боюсь с моим инглишем только опозорю всё русскодумающее сообщество :D
Back to top
View user's profile Send private message
ArtSh
Apprentice
Apprentice


Joined: 05 Aug 2006
Posts: 178
Location: Казань, Россия

PostPosted: Sat Aug 12, 2006 2:13 pm    Post subject: Reply with quote

похоже на то что исходник сжимается разными версиями bzip..
P.S. я тоже столкнулыс при с этим при обновлении кде, думал что смогу через xdelta, но всёравно пришлось делать ebuild digest
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Sat Aug 12, 2006 4:46 pm    Post subject: Reply with quote

посмотрев исходники клиента, я обнаружил дополнительную проверку, видимо, как раз для такой ситуации
Quote:
# this part is based on Pkunk's code posted on https://bugs.gentoo.org/show_bug.cgi?id=63525
# but with some changes

в результате получил следующее:
Code:

...
GOT kdelibs-3.5.3.tar.bz2-kdelibs-3.5.4.tar.bz2.dtu

Successfully fetched the dtu-file - let's build kdelibs-3.5.4.tar.bz2...

kdelibs-3.5.3.tar.bz2 -> kdelibs-3.5.4.tar.bz2: OK
cleaning up
This dtu-file saved 14 MB (98%) download size.

>>> Downloading 'http://ftp.uni-erlangen.de/pub/mirrors/gentoo/distfiles/kdelibs-3.5.4.tar.bz2'
Searching for a previously downloaded file in /usr/portage/distfiles

We have following candidates to choose from
kdelibs-3.4.3.tar.bz2
kdelibs-3.5.1.tar.bz2
kdelibs-3.5.2.tar.bz2
kdelibs-3.5.3.tar.bz2
kdelibs-3.5.4.tar.bz2

The best of all is ... kdelibs-3.5.4.tar.bz2

Checking if this file is OK.

Found kdelibs-3.5.4.tar.bz2, but filesize 15449896  does not match 15450025 (found in digest-file)

>>> Downloading 'http://ftp-stud.fht-esslingen.de/pub/Mirrors/gentoo/distfiles/kdelibs-3.5.4.tar.bz2'
Searching for a previously downloaded file in /usr/portage/distfiles

и так далее по циклу :?
учитывая, что:
Code:
bzip2 -tv /usr/portage/distfiles/kdelibs-3.5.4.tar.bz2
  /usr/portage/distfiles/kdelibs-3.5.4.tar.bz2: ok

после применения патча выходит, что архив не повреждён

как бы обойти такую ситуацию?

кстати, тупой(это, конечно, относится больше к ситуации, нежели к автору этого замечательно скрипта), но workaround:
Automatically resuming an emerge on failure
Back to top
View user's profile Send private message
ArtSh
Apprentice
Apprentice


Joined: 05 Aug 2006
Posts: 178
Location: Казань, Россия

PostPosted: Sun Aug 13, 2006 11:09 am    Post subject: Reply with quote

Этот кусок проверяет старые файлы
Quote:

# this part is based on Pkunk's code posted on https://bugs.gentoo.org/show_bug.cgi?id=63525
# but with some changes
FILE_IS_CORRUPT=false
if $CHECK_OLD_FILE
then
...
fi

Здесь ситуация другая. Файл создаётся правильно, но, видимо сжимается другой версией bzip, что приводит к тому что длина и контрольные суммы несовпадают, о чём и сообщает emerge, после этого он снова пытается закачать их и т.д.
Т.е. необходимо принудительно исправлять digest НОВЫХ файлов.
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Sun Aug 13, 2006 7:01 pm    Post subject: Reply with quote

ArtSh wrote:
Т.е. необходимо принудительно исправлять digest НОВЫХ файлов.


Не надо ничего исправлять, надо обновить deltup до deltup-0.4.3_pre2 (уже в portage). Он использует bzip2 или bzip2_old.
Back to top
View user's profile Send private message
fank
l33t
l33t


Joined: 16 Oct 2004
Posts: 794
Location: Minsk, Belarus

PostPosted: Mon Aug 14, 2006 7:40 am    Post subject: Reply with quote

гм....
Code:
>>> Downloading 'http://distfiles.gentoo.org/distfiles/eix-0.6.3.tar.bz2'
Searching for a previously downloaded file in /usr/portage/distfiles

We have following candidates to choose from
eix-0.5.5.tar.bz2

The best of all is ... eix-0.5.5.tar.bz2

Checking if this file is OK.

Trying to download eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu

--10:38:07--  http://linux01.gwdg.de/~nlissne/deltup.php?have=eix-0.5.5.tar.bz2&want=eix-0.6.3.tar.bz2&url=http://mesh.dl.sourceforge.net/sourceforge/eix/eix-0.6.3.tar.bz2&version=0.7&time=1155541087
           => `deltup.php?have=eix-0.5.5.tar.bz2&want=eix-0.6.3.tar.bz2&url=http:%2F%2Fmesh.dl.sourceforge.net%2Fsourceforge%2Feix%2Feix-0.6.3.tar.bz2&version=0.7&time=1155541087'
...
Proxy request sent, awaiting response... 302 Moved Temporarily
Location: http://134.76.13.21/~nlissne/deltas/eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu [following]
--10:38:07--  http://134.76.13.21/~nlissne/deltas/eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu
           => `eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu'
Proxy request sent, awaiting response... 200 OK
Length: 46.747 (46K) [application/x-bzip2]

100%[=================================================================================================================>] 46.747         5.08K/s    ETA 00:00

10:38:16 (5.07 KB/s) - `eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu' saved [46747/46747]

GOT eix-0.5.5.tar.bz2-eix-0.6.3.tar.bz2.dtu

Successfully fetched the dtu-file - let's build eix-0.6.3.tar.bz2...

eix-0.5.5.tar.bz2 -> eix-0.6.3.tar.bz2: found bzip2 compressors/decompressors:
  /usr/bin/bzip2_old
  /bin/bzip2
found compatible bzip2 compressor: /bin/bzip2
OK
cleaning up
This dtu-file saved 270 kB (85%) download size.

 * checking ebuild checksums ;-) ...                                                                                                                   [ ok ]
 * checking auxfile checksums ;-) ...                                                                                                                  [ ok ]
 * checking miscfile checksums ;-) ...                                                                                                                 [ ok ]
 * checking eix-0.6.3.tar.bz2 ;-) ...                                                                                                                  [ !! ]

!!! Digest verification failed:
!!! /usr/portage/distfiles/eix-0.6.3.tar.bz2
!!! Reason: Filesize does not match recorded size
!!! Got: 323625
!!! Expected: 321473
Back to top
View user's profile Send private message
KCh1
n00b
n00b


Joined: 10 Nov 2005
Posts: 35

PostPosted: Thu Nov 02, 2006 12:23 pm    Post subject: Reply with quote

Ну... так работаетт-ли делтап или нет?
Можно-ли обновить систему, Gnome 2.16 или все качать как есть?
Back to top
View user's profile Send private message
vithar
n00b
n00b


Joined: 20 May 2005
Posts: 41

PostPosted: Thu Nov 02, 2006 8:43 pm    Post subject: Reply with quote

KCh1 wrote:
Ну... так работаетт-ли делтап или нет?
Можно-ли обновить систему, Gnome 2.16 или все качать как есть?


У меня работает.
Back to top
View user's profile Send private message
calculator
Apprentice
Apprentice


Joined: 16 Oct 2006
Posts: 183
Location: Russia, Moscow

PostPosted: Fri Nov 03, 2006 5:34 am    Post subject: Reply with quote

Работает.
Back to top
View user's profile Send private message
Display posts from previous:   
Reply to topic    Gentoo Forums Forum Index Russian All times are GMT
Goto page Previous  1, 2, 3  Next
Page 2 of 3

 
Jump to:  
You cannot post new topics in this forum
You cannot reply to topics in this forum
You cannot edit your posts in this forum
You cannot delete your posts in this forum
You cannot vote in polls in this forum