folder Tahribat.com Forumları
linefolder Python
linefolder Requests Yardım



Requests Yardım

  1. KısayolKısayol reportŞikayet pmÖzel Mesaj
    Bekirella
    Bekirella's avatar
    Kayıt Tarihi: 30/Temmuz/2015
    Erkek

    Arkadaşlar ilk botumu yazmaya başladım dün it-ebooks.info sitesinden verilen bir parametreye göre çıkan ebookların download linklerini kaydetmesi gerekiyordu ama nedenini anlayamadığım bir şekilde 1.sayfadaki bütün linkleri topladıktan sonra next page linkine gitmeyi denesemde yine aynı sayfada kalıyor ve 1.sayfadaki linkleri tekrar çekiyor hiç bir zamanda son sayfaya gelemediği içinde infinity loopda kalıyorum. Arkadaşlar kodum çok çirkin olabilir ilk defa uğraşıyorum daha neyin ne işe yaradığını öğrenemedim kusura bakmayın ve teşekkürler.

    http://paste.ubuntu.com/12840522/

     

    import mechanize
import requests
import copy
from bs4 import BeautifulSoup
sKitap=raw_input("Lutfen aramak istediginiz kelimeyi girin\n")
main_url="http://it-ebooks.info"
response=requests.get("http://it-ebooks.info/search/?q=%s&type=title"%sKitap)
links=BeautifulSoup(response.text).findAll("a")
links=links[1:-4]
results=[]
def getDownloadLink(url):
	html=requests.get(url).text
	start=html.find("Download:")+27
	stop=start+html[start:].find("'")
	results.append(html[start:stop])

def travel(links):
    global results,main_url
    for e in links:
        if str(e)[9:16]!= '/search':
            start=str(e).find('"')+1
            finish=start+str(e)[start:].find('"')
            book_url=main_url+str(e)[start:finish]
            getDownloadLink(book_url)
        elif e == links[-1] and "Prev page" not in str(e):
            start=str(e).find('"')+1
            finish=start+str(e)[start:].find('"')
            nextt=main_url+str(e)[start:finish]
            response=requests.get(nextt)
            html=BeautifulSoup(response.text)
            nextlinks=html.findAll("a")
            nextlinks=nextlinks[1:-4]
            return travel(nextlinks)
            else:
            return

travel(links)
dosya=open("sonuclar.txt","w")
dosya.write("\n".join(results))
dosya.close()

     

    Bekirella tarafından 18/Eki/15 11:08 tarihinde düzenlenmiştir
    Bilgi bilmek için var
    Reply With Quote Alıntı yap
  2. KısayolKısayol reportŞikayet pmÖzel Mesaj
    YekteranBaymedir
    YekteranBaymedir's avatar
    Kayıt Tarihi: 10/Temmuz/2009
    Homo

    bu tarz bir kodlamayla ilerde çoook sorun yaşayacaksın (encode / decode)

    özellikle requests.get().text of of ki ne of of

    fikir versin

    http://paste.ubuntu.com/12840589/

    Reply With Quote Alıntı yap
  3. KısayolKısayol reportŞikayet pmÖzel Mesaj
    Bekirella
    Bekirella's avatar
    Kayıt Tarihi: 30/Temmuz/2015
    Erkek
    Daft bunu yazdı

    bu tarz bir kodlamayla ilerde çoook sorun yaşayacaksın (encode / decode)

    özellikle requests.get().text of of ki ne of of

    fikir versin

    http://paste.ubuntu.com/12840589/

    Teşekkürler hocam yok farkındayım mide bulandırıcı bir kod olduğundan da neyin ne olduğunu daha tam öğrenemediğimden amele usulü string parsing yapmak durumda kaldım :D

    Bilgi bilmek için var
    Reply With Quote Alıntı yap
  4. KısayolKısayol reportŞikayet pmÖzel Mesaj
    YekteranBaymedir
    YekteranBaymedir's avatar
    Kayıt Tarihi: 10/Temmuz/2009
    Homo

    download kısmında da:

    http://paste.ubuntu.com/12840648/

    işini kolaylaştırabilir

    Reply With Quote Alıntı yap
  5. KısayolKısayol reportŞikayet pmÖzel Mesaj
    Bekirella
    Bekirella's avatar
    Kayıt Tarihi: 30/Temmuz/2015
    Erkek

    code hala çirkin olmasına rağmen çalışır hale geldi işte son hali:

    http://paste.ubuntu.com/12840931/

    bu da örnek amacıyla "python" ibaresiyle arattığım ebookların download linkleri:

    http://paste.ubuntu.com/12840936/

     

    Daft hocam çok teşekkür ederim bu en son attığınız download için olanı kavrayamadığımdan kullanmadım ama kesinlikle inceliycem

    Bilgi bilmek için var
    Reply With Quote Alıntı yap
Toplam Hit: 1254 Toplam Mesaj: 5
python bot requests