oss读取数据集

2021-11-29 16:34:52 阅读：132 来源： 互联网

标签：读取数据 img oss object bucket import buf

# -*- coding: utf-8 -*-
import oss2
import io
from PIL import Image
import os
import cv2
import tensorflow as tf
# 阿里云账号AccessKey拥有所有API的访问权限，风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维，请登录RAM控制台创建RAM用户。
auth = oss2.Auth('sb', 'sb')
# yourEndpoint填写Bucket所在地域对应的Endpoint。以华东1（杭州）为例，Endpoint填写为https://oss-cn-hangzhou.aliyuncs.com。
# 填写Bucket名称。
endpoint = 'oss-cn-shanghai.aliyuncs.com'
bucket = oss2.Bucket(auth, 'oss-cn-shanghai.aliyuncs.com', 'sb')
# bucket.get_object的返回值是一个类文件对象（File-Like Object），同时也是一个可迭代对象（Iterable）。
# 填写Object的完整路径。Object完整路径中不能包含Bucket名称。
index_file = 'train/test.txt'
# object_stream = bucket.get_object('facetrain/test.txt')

_indices = bucket.get_object(index_file).read().decode().splitlines()
print(type(_indices))

datalist = []
labellist = []
for file in _indices:
    pathlist = file.split(" ")
    filepath = 'facetrain'+'/'+ pathlist[0]+'/'+pathlist[1]
    img_str = bucket.get_object(filepath)
    img_buf = io.BytesIO()
    img_buf.write(img_str.read())
    img_buf.seek(0)
    img = Image.open(img_buf).convert('RGB')
    img_buf.close()
    label = pathlist[0][0]
    datalist.append(img)
    labellist.append(img)

标签：读取数据,img,oss,object,bucket,import,buf
来源： https://blog.csdn.net/qq_16792139/article/details/121613043

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

oss读取数据集