Chaquopy 问题与 nltk 和下载

Question

根据Chaquopy Not able to download Resource，我不确定问题是否已解决。

所以这里是 nltk 上下文中的问题。在包含 nltk.download 行之一之后：

nltk.download('popular')
or
nltk.download('punkt')
or
nltk.download('all')

我得到这个堆栈跟踪：

2020-08-26 13:33:45.742 19765-19765/com.pro.useyournotes E/ExceptionTag: com.chaquo.python.PyException: BadZipFile: File is not a zip file
    com.chaquo.python.PyException: BadZipFile: File is not a zip file
        at <python>.zipfile._RealGetContents(zipfile.py:1335)
        at <python>.zipfile.__init__(zipfile.py:1268)
        at <python>.nltk.data.__init__(data.py:936)
        at <python>.nltk.compat._decorator(compat.py:41)
        at <python>.nltk.data.__init__(data.py:396)
        at <python>.nltk.compat._decorator(compat.py:41)
        at <python>.nltk.data.find(data.py:544)
        at <python>.nltk.data.find(data.py:557)
        at <python>.nltk.tag.perceptron.__init__(perceptron.py:168)
        at <python>.nltk.tag._get_tagger(__init__.py:106)
        at <python>.nltk.tag.pos_tag_sents(__init__.py:178)
        at <python>.uyn_pre_processing.pre_processing(uyn_pre_processing.py:88)
        at <python>.uyn_analysis_workflow.analyse_new_data(uyn_analysis_workflow.py:62)
        at <python>.uyn_main.main(uyn_main.py:266)
        at <python>.chaquopy_java.call(chaquopy_java.pyx:285)
        at <python>.chaquopy_java.Java_com_chaquo_python_PyObject_callAttrThrows(chaquopy_java.pyx:257)
        at com.chaquo.python.PyObject.callAttrThrows(Native Method)
        at com.chaquo.python.PyObject.callAttr(PyObject.java:209)
        at com.pro.useyournotes.MainActivity.getPythonHello(MainActivity.kt:70)
        at com.pro.useyournotes.MainActivity.onCreate(MainActivity.kt:59)
        at android.app.Activity.performCreate(Activity.java:7136)
        at android.app.Activity.performCreate(Activity.java:7127)
        at android.app.Instrumentation.callActivityOnCreate(Instrumentation.java:1271)
        at android.app.ActivityThread.performLaunchActivity(ActivityThread.java:2893)
        at android.app.ActivityThread.handleLaunchActivity(ActivityThread.java:3048)
        at android.app.servertransaction.LaunchActivityItem.execute(LaunchActivityItem.java:78)
        at android.app.servertransaction.TransactionExecutor.executeCallbacks(TransactionExecutor.java:108)
        at android.app.servertransaction.TransactionExecutor.execute(TransactionExecutor.java:68)
        at android.app.ActivityThread$H.handleMessage(ActivityThread.java:1808)
        at android.os.Handler.dispatchMessage(Handler.java:106)
        at android.os.Looper.loop(Looper.java:193)
        at android.app.ActivityThread.main(ActivityThread.java:6669)
        at java.lang.reflect.Method.invoke(Native Method)
        at com.android.internal.os.RuntimeInit$MethodAndArgsCaller.run(RuntimeInit.java:493)
        at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:858)

出现这个错误的代码是：

    tagged_words=nltk.pos_tag_sents(tokenized_sentences)

at <python>.uyn_pre_processing.pre_processing(uyn_pre_processing.py:88)

我也不知道 nltk 文件放在哪里。早些时候，当我刚刚在 python 端编程时，我只记得使用 import nltk 命令。希望有些人已经找到了使用 nltk 的解决方案。

Answer 1

我能够在模拟器上重现类似的东西。在我的例子中，根本原因是下载失败并出现 DECRYPTION_FAILED_OR_BAD_RECORD_MAC 错误，留下不完整的 ZIP 文件。

这似乎是模拟器的 low-level 问题，并非 Python 所特有。如果您可以确认您遇到了同样的问题（通过查看 nltk.download logcat output), then please add a star on the Android issue tracker here 中的 DECRYPTION_FAILED_OR_BAD_RECORD_MAC，以帮助鼓励他们解决问题。

您可以通过在循环中重复调用 nltk.download 直到 returns 为真来解决此问题。为了节省时间，您应该只下载您需要的数据文件。您可以通过简单地调用相应的函数并查看错误消息来找出这些是什么，例如：

>>> nltk.pos_tag_sents([["hello", "world"]])
...
LookupError: 
**********************************************************************
  Resource [93maveraged_perceptron_tagger[0m not found.
  Please use the NLTK Downloader to obtain the resource:
 
  [31m>>> import nltk
  >>> nltk.download('averaged_perceptron_tagger')

然后您可以将此添加到您的代码中：

while not nltk.download('averaged_perceptron_tagger'):
    print("Retrying download")

这在几次迭代后成功了，然后我就可以成功调用 nltk.pos_tag_sents。

Answer 2

将此添加到您的 python 脚本中：

    while not nltk.download('punkt'):
        return ("Retrying download punkt")

同样在您的 AndroidManifest 中不要忘记添加这些权限：

<uses-permission android:name="android.permission.INTERNET" />
<uses-permission android:name="android.permission.ACCESS_NETWORK_STATE" />

Chaquopy 问题与 nltk 和下载

Chaquopy problems with nltk and download

python

android-studio

kotlin

nltk

chaquopy