Pythonのウェブサイトからテキストファイルを読む

Question

こんにちは私は問題を抱えていますが、ウェブからすべてのデータを取得したいのですが、これを変数に保存するには大きすぎます。私は、データがこのようにそれを作る保存：

r = urlopen("http://download.cathdb.info/cath/releases/all-releases/v4_2_0/cath-classification-data/cath-domain-list-v4_2_0.txt") 
r = BeautifulSoup(r, "lxml") 
r = r.p.get_text() 
some operations 

この私はこのウェブサイトからデータを取得する必要がありますまで、良い仕事をしていた：私は私のプログラムがで停止され、このページに上記と同じコードを実行 http://download.cathdb.info/cath/releases/all-releases/v4_2_0/cath-classification-data/cath-domain-description-file-v4_2_0.txt

行

r = BeautifulSoup(r, "lxml") 

これは永遠に何も起こりません。私はキーワード全体を検索して印刷するいくつかの操作を行うために、この全データをファイルに保存しない方法を知らない。これをファイルに保存することはできません。ウェブサイトから取得する必要があります。

私は非常にすべての助けに感謝します。

Answer 1

以下のコードは、あなたが望むことができると思います。 @alecxeによるコメントのように、BeautifulSoupを使う必要はありません。この問題は、オンラインのファイルとなぜあなたはHTMLパーサで「TXT」ファイルを解析している。このIn Python, given a URL to a text file, what is the simplest way to read the contents of the text file?

import urllib.request import urlopen 

r = urlopen("http://download.cathdb.info/cath/releases/all-releases/v4_2_0/cath-classification-data/cath-domain-list-v4_2_0.txt") 

for line in r: 
    do_somthing()