BuDuScRiPt Plugin Forum

SUGGERIMENTO da BuDuS ha scritto:Vedo che molti finiscono in questo post cercando XBSPSE prodotti da terzi.

Nella sezione Guide c'è un post dedicato agli XBSPSE, consiglio di consultarlo.

Elenco server da aggiungere come XBSPSE (purtroppo ho provato a seguire le linee guida, ma non riesco a ricavare i dati necessari) quindi chiedo la coredia che siano aggiunti (anche solo in forma beta).
Mi propongo per aggiornare i link (che possono cambiare) ogni 10 giorni per gli utenti che usano questo script.

#Only_Game irc.edenirc.net http://onlygameweb.it/onlygame/
#MiSt3Ry irc.ItaLiaN-AmiCi.org http://mistery.easyscripts.it/47rty4hw6rs64w.php
#BLUSERVER ps.darksin.ch#DarkSin http://bluserver.easyscripts.it/47rty4hw6rs64w.php
#La-VideOtEcA irc.ItaLiaN-AmiCi.OrG http://www.italian-amici.net/videoteca/
#Horror ps.darksin.ch http://googleweb.altervista.org/tutti.php
#future_games irc.OpenJoke.org http://futur3-gam3s.net/l1sta-gam3s/index.php
#Divx-Italia irc.ItaLiaN-AmiCi.org http://www.italian-amici.net/
#William&Gattone ps.darksin.ch http://www.williamlist.universalspace.net/index.php
#RuleZ-ManiA irc.uragano.org http://www.rlz.helloweb.us/
#ShareIT irc.OceanIRC.Net http://shareitlista.altervista.org/lista/002156.php
#GaLeoNe-dEi-PiRaTi irc.OpenJoke.org http://galeonedeipirati.hjoker.eu/lista2/
#BLOOMONE irc.artikanet.org http://bloomone.listadb.com/listabloomone/
#ReD_DrAgOn irc.artikanet.org http://reddragonlist.altervista.org/
#OriOn irc.kiss0fdeath.net http://www.uwmovement.com/lista4/
#IperMega irc.artikanet.org http://bloomone.listadb.com/listaipermega/
#CartOOn1a ps.darksin.ch http://www.panzarotti.altervista.org/ca ... /index.php
#Music_World IRC.BOiNG-Irc.it http://wrl.helloweb.us/
#BOiNG IRC.BOiNG-Irc.it http://salvatore2812.helloweb.us/
#HigH_VoLtAgE irc.planet-word.org http://www.hrl.voltage.universalspace.net//index.php
#only_music irc.EdenIrc.Net http://hatboy.it/l1st4/
#Pulse irc.Planet-Word.Org http://www.pulse.comeze.com/index.php
#SoloFilm irc.QuartzNet.Org http://lista3.diaboliko.eu/d38jd83jd.php
#BlockBuster irc.KiSs0fDeAtH.NeT http://cartoonworld.altervista.org/xdcc/index.php
#SPiKeBLooD irc.Swiss-Road.NeT http://spikeblood2.universalspace.net/
#Switzerland irc.Swiss-Road.NeT http://swiss-host-solution.net/liste/Sw ... ss4789.php
#Gli_InTocCaBiLi irc.Uragano.Org http://libertylist.altervista.org/
#FUSION power.chlame.net http://fusion.chlame.net/list/tools/simple_output.php
#PARADISO irc.Platinumirc.Org http://paradiso.platinumirc.net/lista/lista1/index.php
#MoViE_PaSSiOn ps.darksin.ch http://moviepassion.altervista.org/7657657663746.php
#AldeBaran irc.Platinumirc.Org http://www.aldebaran.joomlafree.it/
#oce@n irc.OceanIRC.net http://lista.oceanirc.eu/lwo/
#ENiGMA ps.darksin.ch http://enigmalist.altervista.org/
#CINEMAX power.chlame.net http://cin3max.darksin.eu/L1sta/
#ChErVeLLaT ps.darksin.ch http://hevean.meravigliao.com/
#comingsoon irc.terribili.net http://www.futureshell.it/comingsoon/
#CreSiWorld iRc.KiSs0fDeAtH.NeT http://shareitlista.altervista.org/lista/002156.php
#CoRaZoN-GyTaNo irc.OpenJoke.org http://corazon-gytano.com/gytano/lista1/index.php#
#futura power.chlame.net http://www.futura.lista.universalspace.net/
#drakon ps.darksin.ch http://leoncini1.altervista.org/
#bounty irc.ItaLiaN-AmiCi.OrG http://www.italian-amici.net/bounty-B/
#backstage irc.Friend4Ever.it http://www.friend4ever.it/lista/backstage/index.php
#LoVeLyStAr power.chlame.net http://lovelystar.universalspace.net/
#stargate irc.KiSs0fDeAtH.NeT http://stargatechan.hopto.org/
#ANGELS&DEMONS power.chlame.net http://91.121.208.200/imola/index.php
#Dragon irc.Swiss-Road.NeT http://www.giammarcos.it/swiss/InFiss4.php
#warnet irc.Platinumirc.Org http://46.166.152.210/web/.state/homenx248761248435.php
#nexplaned ps.darksin.ch http://www.nexplaned.altervista.org/
#italia irc.Friend4Ever.it http://friend4ever.it/lista/italia/index.php
#SerieTivu irc.QuartzNet.Org http://lista2.bluserver.eu/d38jd83jd.php
#Magicovento Irc.Friend4Ever.it http://www.magicovento.net/index.php
#STARLIGHT ps.darksin.ch http://starlight.universalspace.net/
#DoLce_e_SaLaTo irc.Friend4ever.it http://ricette.twilightparadox.com/
#LaGuNa_BlU irc.RadioTheWorld.eu http://lagunalista.altervista.org/
#nibirus irc.OpenJoke.org http://nib1ru2l1st2.netsons.org/lista1/
#audax irc.Terribili.net http://audax.audaxteam.net/audax.php
#Mega_Fantasy irc.OpenJoke.org http://megafantasy.hjoker.eu/fantasy/lista1/
#ultranetwork power.chlame.net http://www.ultranetwork.it/lista/
#ApocalypseNoW irc.Terribili.net http://www.terribili.net/apocalypse/
#INTERSECT irc.OpenJoke.org http://www.uwmovement.com/lista3/#
#Hollywood irc.Terribili.net http://www.terribili.net/hollywood/#
#MIDNIGHT power.chlame.net http://midsummer.altervista.org/
#OrSa_MaGgIoRe irc.RadioTheWorld.eu http://orsalista.altervista.org/
#AmPaRo irc.RadioTheWorld.eu http://amparo.altervista.org/
#IL_SIGNORE_DEGLI_ANELLI irc.RadioTheWorld.eu http://ilsignoredegli.altervista.org/
#MaNdRakE irc.Terribili.net http://mandrake.solotv.eu/index.php
#ReTrOGaMeS irc.Terribili.net http://retrogames.audaxteam.net/index.php
#Saymon_Music irc.Friend4ever.it http://www.friend4ever.it/lista/nwpmusic/
#ThE-LeGeNd-LiVeS irc.OpenJoke.org http://www.thelegendlives.easyscripts.it/index.php
#MONDOVIDEO power.chlame.net http://mondocinema2.altervista.org/index.php
#HaM_RaDiO irc.Terribili.net http://www.terribili.net/radiolist/index.php

Sono riuscito a creare qualche XBSPSE (appena ne ho fatti un po', li pubblico).
Ho pero' riscontrato alcuni problemi dello script,quando elenca i risultati su xchat, alcune parti vengono tagliate se la parola è troppo lunga.
Ad esempio il bot si chiama Only|G|xbox360|0001 quando viene visualizzato la ricerca su xchat il bot ha questo valore Only|G|xbox360|0.
Questo succede anche per le voci NETWORK E CHANNEL. Come si puo' risolvere?

Notevole !!!
Penso che riuscirò a darci un'occhiata Domenica ... certo, sono parecchi ... ma sicuro ci guardo.

In linea di massima preferirei tenere "canali" che hanno i seguenti requisiti:

• Forniscono "materiale di nicchia", che non si trova altrove (ad esempio vedo che c'è "horror"; in passato ne avevo uno, ma ultimamente non funziona più, spero vada quello citato nel post sopra).
• Non richiedono una password per accedere alla lista; riesco ad ottenerla in automatico, ma è un'elaborazione molto pesante e può fallire facilmente.
• In linea di massima, la lista può essere elaborata in modo ragionevolmente facile e comunque non fa uso di "aggeggi flash" o che comunque richiedono l'interazione forzata dell'utente. Fino ad ora sono sempre riuscito a saltarci fuori in quelli analizzati che poi ho implementato.

***

Per quanto riguarda il "troncamento": non è un BUG, è una cosa voluta per evitare che la lista sia troppo lunga.

La mia intenzione sarebbe quella, possibilmente, di mantenere "un risultato per riga" lasciando, al limite, che sia il nome del file - la parte con lunghezza caratteri più variabile in assoluto - ad essere "portato eventualmente a capo".

Notare che, pur venendo "troncati", i risultati vengono comunque gestiti correttamente, ovvero: è solo una questione di visualizzazione, il database che poi gestisce i download mantiene i nomi completi.

Se questo comportamento da proprio fastidio, posso vedere di aggiungere un'opzione.

***

Onestamente non ci speravo che qualcuno si cimentasse nella creazione di XBSPSE
Quando li ho implementati all'inizio non potevo avere le idee particolarmente chiare e li ho immaginati "tutti creati ad hoc". Strada facendo, tuttavia, mi sono accorto che i personaggi che realizzano le liste si appoggiano a "software ben precisi", grosso modo direi che le tipologie sono solo 2 e, aldilà dell'aspetto, il contenuto ha la medesima formattazione e, per creare un nuovo XBSPSE, spesso occorre solo cambiare i dati relativi a network/canale/botserv.

Questo mi consentirebbe di creare una funzione di libreria; per creare un nuovo XBSPSE, sarebbe quindi sufficiente invocare, ad esempio, una funzione alla quale, come parametro, gli si dice la tipologia di lista (per ora potrei analizzare le due che ho individuato), network, canale, e link della lista. Tutto il resto viene fatto in automatico.
Avevo intenzione di implementare tutto questo appena possibile: potrebbe dare la possibilità di creare molti XBSPSE in modo facile e, soprattutto, mantenerli senza grossi problemi.

***

Per ora ti ringrazio del post !

Dunque, ho lavorato piuttosto alacremente per implementare qualcosa di simile a quanto annunciato nel precedente post.

Considera che, per analizzare ogni possibile XBSPSE relativo alla lista fornita, mi parte quasi 1 ora
È infatti sempre indispensabile controllare che:

• L'XBSPSE non sia già presente (oppure: lo fosse ma è stato eliminato perché non più funzionante)
• Il Network sia attivo e il canale "funzionante".
• La lista sia accessibile ed elaborabile (a volte sono più di una e bisogna operare di conseguenza)
• Se è richiesta PASSWORD, la faccenda si complica moltissimo

Concludendo, sono riuscito ad analizzare (ed eventualmente implementare) l'XBSPSE per queste fonti:

1. irc.edenirc.net #Only_Game http://onlygameweb.it/onlygame/
2. irc.ItaLiaN-AmiCi.OrG #La-VideOtEcA http://www.italian-amici.net/videoteca/
3. (NON FUNZIONA LA LISTA)ps.darksin.ch #Horror http://googleweb.altervista.org/tutti.php
4. irc.OpenJoke.org #future_games http://futur3-gam3s.net/l1sta-gam3s/index.php
5. irc.ItaLiaN-AmiCi.org #Divx-Italia http://www.italian-amici.net/
6. (GIA' PRESENTE)irc.uragano.org #RuleZ-ManiA http://www.rlz.helloweb.us/
7. irc.OceanIRC.Net #ShareIT http://shareitlista.altervista.org/lista/002156.php
8. irc.OpenJoke.org #GaLeoNe-dEi-PiRaTi http://galeonedeipirati.hjoker.eu/lista2/
9. irc.artikanet.org #BLOOMONE http://bloomone.listadb.com/listabloomone/
10. irc.artikanet.org #ReD_DrAgOn http://reddragonlist.altervista.org/
11. ps.darksin.ch #ENiGMA http://enigmalist.altervista.org/
12. (GIA' PRESENTE)power.chlame.net #CINEMAX http://cin3max.darksin.eu/L1sta/
13. ps.darksin.ch #drakon http://leoncini1.altervista.org/
14. irc.Friend4Ever.it #italia http://friend4ever.it/lista/italia/index.php
15. irc.RadioTheWorld.eu #LaGuNa_BlU http://lagunalista.altervista.org/

Ho rilasciato la versione BETA del plugin 3.6.70 che, oltre ad includere i nuovi XBSPSE, introduce alcune novità:

• Opzione per non troncare i risultati.
• La possibilità di installare un pacchetto di XBSPSE creato e mantenuto da terzi.
  

  Questo ti offre la possibilità di creare il tuo pacchetto e caricarlo sul tuo sito; gli utenti che vogliono utilizzarlo devono semplicemente prendere l'URL al pacchetto tar.gz opportunamente creato e incollarlo nella finestrella che si apre usando il comando di menu: XDCC -> Gestione Motori di Ricerca -> Installa XBSPSE da terzi
  
  Per creare suddetto pacchetto ho creato - perdona il gioco di parole - un pacchetto ad hoc scaricabile da qui: http://digilander.libero.it/udasoft/Software/Linux/buduscript/budus_xbspse_extension.tar.gz
  che spiega passo-passo come operare.
  

Sono a disposizione per qualsiasi dubbio; appena possibile, penso che aggiornerò la guida per creare gli XBSPSE, spiegando le novità introdotte.

Per il momento non intendo implementare ulteriori XBSPSE; già ho difficoltà a mantenere quelli presenti (che non sono pochi), farei fatica con altri e, inoltre, troppi XBSPSE tendono a rallentare troppo i tempi di ricerca.

Tuttavia, se crei degli XBSPSE (controlla però che già non ci siano, altrimenti è lavoro buttato perché poi si "sovrascrivono a vicenda"), sono disponibile a testarli e pubblicizzarli.

Grazie per aver preso in carico il tread e per aver modificato lo script.
Appena ho un po di tempo mi metto in moto per creare XBSPSE personalizzati,
ti chiedo di conoscere il tuo indirizzo email in modo da poterti inviare un fikle compresso rar con tute le mie creazioni (il mio jdesign80_2([at)]yahoo.it)
Saluti

Eccomi nè ho creati un po ecco il file da scaricare
http://jdesign802.altervista.org/budusc ... pse.tar.gz

Ho avuto alcuni problemi con alcuni siti, in quanto sono formattati in modo diverso e non ho capito come dargli impasto i dati.
Sicuramente chiedero' aiuto.

Intanto mi complimento per l'ottimo lavoro !

Ne hai prodotti veramente tanti, avrai il tuo bel da fare a mantenerli aggiornati

Li ho analizzati tutti, questi sono i suggerimenti che propongo per realizzare il pacchetto definitivo:

1. Controllare che non siano presenti i files di backup dell'editor.
   

   Non so se utilizzi EMACS come editor, ma ho notato che, di ogni file, c'è il file di backup. Sono quelli che terminano con la tilde (~).
   Te lo dico perché, spesso, i file manager non li fanno vedere, li nascondono, e quindi magari non li hai visti (ma ci sono e sono tanti).
   Per rimuoverli si può usare il comando:
   

   Codice: Seleziona tutto

   rm -vf *~

   
   tuttavia, se inavvertitamente si omette la tilde, si combina un disastro, potando tutto il contenuto della cartella corrente !
   Per evitare questo spiacevolissimo inconveniente, io consiglio di crearsi uno script (da mettere nel PATH, ad esempio in /usr/local/bin) che esegua l'operazione (ad esempio io ho "purge_emacs_backup") in modo sicuro.
   

2. Evitare la creazione di sotto-cartelle; considera che il pacchetto verrà installato da terzi e potrebbero non gradire che gli vengano create ulteriori cartelle o cose di questo tipo.
3. Ho analizzato tutti gli XBSPSE e, specificatamente, abbiamo che:
   
   • Darksin_moviepassion fallisce abbastanza pesantemente:
     

     Codice: Seleziona tutto

     ********************************************************************************
RECORDS MALFORMATI NEL DATABASE PERMANENTE DI: Darksin_moviepassion
FILE DATABASE PERMANENTE: "/tmp/budus_XDCC_db_Darksin_moviepassion.20120413"

RECORDS TOTALI     :     31918
RECORDS CORRETTI   :         0
RECORDS MALFORMATI :     31918
RAPPORTO SUCCESSO  :         0%
********************************************************************************

     
     dato che rimangono molti records simili a questo:
     

     Codice: Seleziona tutto

     darksin ps.darksin.ch #MoViE_PaSSiOn  MoViE|AC3|01 #1');"href=#>#1</a></th><td width=10%>1.8G NOMEFILE /ms
g MoViE|AC3|01 xdcc send #1');"href=#>#1</a></th><td width=10%>1.8G

     
     Per rimuovere il codice bisogna creare appositi filtri; il consiglio è quello di suddividere ogni record nei suoi vari campi (8) e analizzare ogni pezzo. Ad esempio il primo pezzo da rimuovere è:
     

     Codice: Seleziona tutto

     ');"href=#>#1</a></th><td width=10%>
     
     che può essere tolto con:
     

     Codice: Seleziona tutto

     | sed 's@.);"href=#>#[0-9]*</a></th><td width=[0-9]*%>@\t@'
     
     mentre, il secondo pezzo:
     

     Codice: Seleziona tutto

     ');"href=#>#1</a></th><td width=10%>1.8G
     
     io lo andrei a rimuovere con:
     

     Codice: Seleziona tutto

     | sed 's@.);"href=#>#[0-9]*</a></th><td width=[0-9]*%>.*@@'
     
     Chiaramente non basta "tagliare", bisogna sempre controllare che i campi (che devono essere sempre 8) siano rispettati nel giusto ordine.
   • Darksin_williamegattine deve essere migliorato, altrimenti rimane poco. Qui abbiamo il codice:
     

     Codice: Seleziona tutto

     <td width=90% align=left>
     
     che andrebbe rimosso con:
     

     Codice: Seleziona tutto

     | sed 's@<td width=[0-9]*% align=left> @\t@'
   • KiSs0DeAtH_CreSiWorld ha lo stesso problema del precedente e puoi risolverlo allo stesso modo.
   • Openjoke_CoRaZoN_GyTaNo ha un problema abbastanza pesante perché, dopo il nome del file e prima della dimensione del medesimo, si presenta tutta un'area che va tolta. Qui devi rivedere meglio il filtro.
   • Openjoke_megafantasy ha pure lui un problema pesante che richiede un'analisi più attenta del filtro.
   • Planet-Word_Gli_InTocCaBiLi è abbastanza buono ma, oltre a rimuovere:
     

     Codice: Seleziona tutto

     <td width=90% align=left>
     
     con:
     

     Codice: Seleziona tutto

     | sed 's'<td width=[0-9]*% align=left>@@
     
     c'è da riordinare bene gli 8 elementi.
   • Platiniumirc_paradiso presenta un problema strano: contiene un carattere non ascii alla fine di alcuni campi; qui bisognerebbe analizzare se e' presente fin dal sorgente o viene, in qualche modo, introdotto erroneamente dal filtro.
   • Platinumirc_aldebaran presenta una manciata di records malformati, lo lascerei così.
   • Terribili_audax segnala fallimento totale, tuttavia, credo che il problema sia abbastanza banale: probabilmente è la dimensione che, essendo racchiusa tra parentesi quadre, viene interpretata come errore dal programma di verifica. In pratica bisognerebbe, quando vengono ripuliti i vari campi, togliere prima il "[" e poi il "]".
   • Terribili_Mandrake presente il medesimo problema di Terribili_audax.
   • Terribili_Retrogames idem come sopra.
4. Controllare che il campo "# PLUGIN LIST:" corrisponda al relativo plugin; ricavando i file uno dall'altro, facile dimenticarsi di sistemarli.
5. Nel nome del file degli XBSPSE utilizza esclusivamente lettere e numeri; in uno c'è la "&", meglio non usare nomi di questo tipo, possono dare problemi.
6. Per analizzare gli XBSPSE ti consiglio il comando:
   

   Codice: Seleziona tutto

   ./buduscript_script__test_xbspse.sh --min-malformed-record-average 1000 --do-not-ask-user --do-not-remove-permanent-db

   
   Puoi copiarteli in una cartella a parte e crearti il link simbolico allo script; ad esempio io ho creato:
   

   Codice: Seleziona tutto

   lrwxrwxrwx 1 uda users   60 13 apr 19.43 buduscript_script__test_xbspse.sh -> /home/uda/src/c/buduscript/buduscript_script__test_xbspse.sh
lrwxrwxrwx 1 uda users   50 13 apr 21.10 budus_XBSPSE_Crawler.sh -> /home/uda/src/c/buduscript/budus_XBSPSE_Crawler.sh
lrwxrwxrwx 1 uda users   46 13 apr 21.10 budus_XBSPSE_LIB.sh -> /home/uda/src/c/buduscript/budus_XBSPSE_LIB.sh

   
   (io uso direttamente i sorgenti, ma tu puoi usare i file in .xchat2/buduscript)
   e fare il contrario con gli XBSPSE, ovvero: ce li hai in una cartella a parte e crei un link nella cartella di buduscript.
   In questo modo li hai "in due posti contemporaneamente", ma puoi gestirli e controllarli molto più facilmente.
7. Se usi EMACS, puoi trovare giovamento dall'uso del sistema RCS. Ho scritto una guida sul blog.
8. Molti XBSPSE contengono un BUG che ho risolto nell'ultima versione dello script; nulla di grave, tuttavia, devi cambiare la riga:
   

   Codice: Seleziona tutto

   if [ ! -f ${tempfile} ]; then
   
   in
   

   Codice: Seleziona tutto

   if [ ! -f ${plugin_tempfile} ]; then
   
   Ce ne sarebbe anche un altro analogo, ma riguarda solo gli XBSPSE di tipo PASSWORD e non mi pare tu ne abbia fatti, quindi siamo a posto.

Ultimo consiglio: analizza gli XBSPSE uno alla volta e passa al successivo solo quando il software di test te lo da funzionante almeno al 99%.
Per controllare un solo XBSPSE puoi usare la sintassi:

e, dalla lista, scegliere quello che vuoi controllare e aggiungerlo, ad esempio:


Infine: quello che non è chiaro, chiedi pure

Ti ringrazio per i consigli, mi sono avvicinato al linguaggio bash quando ho conosciuto il tuo script e per me risulta ancora acerbo.
Ho riparato i vari errori (il pacchetto da scaricare è sempre lo stesso quindi non lo linko nuovamente), non sono riuscito ancora a risolvere il problema del togliere le parentesi quadre per Terribili_audax e quelli successivi con lo stesso errore (puoi darmi una mano?).

Per quanto riguarda alcuni siti che hanno una diversa formattazione tipo questi :

#comingsoon irc.terribili.net http://www.futureshell.it/comingsoon/
#BOiNG IRC.BOiNG-Irc.it http://salvatore2812.helloweb.us/
#Music_World IRC.BOiNG-Irc.it http://wrl.helloweb.us/

Si puo' creare un ciclo (come si fa php) ?
Avrei in mente di far prendere il nome del bot all'inizio e poi fare un ciclo che si ferma quando trova in nome del bot successivo si puo' implementare o diventa troppo difficile?

Ora sono fuori e non riesco a rispondere subito alle domande, lo farò domani.

Ti ho mandato una mail ieri con gli script modificati, l'hai ricevuta vero ?

Non ti preoccupare, vai con calma, non vado assolutamente di fretta.

Non avevo propio controllato l'email, ora lo faccio.