pyodps引用第三方包，上传时超过100兆，如何解决?

可以使用阿里云的对象存储服务(OSS)来存储第三方包，然后在DataWorks中引用。将第三方包上传到OSS后，用户可以通过“数据集成”功能中的OSS Reader组件进行读取和使用。

可以考虑使用阿里云的OSS（对象存储服务）来存储大于100M的第三方包，然后使用pyodps中的create_external_table或create_table_like方法，将OSS中的第三方包作为外部表或者参照表导入ODPS中使用。

具体操作步骤如下：

将第三方包上传到阿里云OSS中，可以使用OSS的SDK或者控制台上传。

在ODPS中创建外部表，指定OSS路径，示例代码如下：

from odps import ODPS o = ODPS('your_access_id', 'your_access_key', 'your_endpoint') o.create_external_table('external_pkg', [('name', 'string'), ('version', 'string')], 'oss://your-bucket/your-object', file_format='json')

其中，'external_pkg'为外部表名称，[(‘name’, ‘string’), (‘version’, ‘string’)]为外部表的列信息，'oss://your-bucket/your-object'为OSS中第三方包所在的路径。

在ODPS中创建表，参考外部表的结构，示例代码如下

o.create_table('my_table', [('name', 'string'), ('version', 'string')])

将外部表或参考表中的列信息导入到新建表中，示例代码如下： o.execute_sql('insert into my_table(name, version) select name, version from external_pkg') 这种方式可以避免直接在pyodps中上传超过100M的第三方包，也能够很好地利用阿里云的OSS服务来存储大型文件。

楼主你好，一般对于大于100MB的文件,建议采用分片上传的方法,每次进行分片上传都建议重新new一个新的OSS实例。

在使用pyodps上传第三方包时，如果超过100兆的限制，可以采取以下解决方案：

1. 将第三方包拆分成多个小文件，分别上传到ODPS中，并在代码中引用这些小文件。

2. 将第三方包上传到OSS中，并在代码中引用OSS中的文件。

3. 将第三方包打包成zip或tar.gz格式，然后上传到ODPS中，并在代码中解压缩使用。

4. 使用ODPS的资源管理功能，将第三方包上传到资源库中，并在代码中引用资源库中的文件。

通过以上解决方案，可以避免上传超过100兆的第三方包时出现的问题。