午夜视频免费看_日韩三级电影网站_国产精品久久一级_亚洲一级在线播放_人妻体内射精一区二区三区_91夜夜揉人人捏人人添红杏_91福利在线导航_国产又粗又猛又黄又爽无遮挡_欧美日韩一区在线播放_中文字幕一区二区三区四区不卡 _日日夜夜精品视频免费观看_欧美韩日一区二区三区

主頁 > 知識庫 > python保存大型 .mat 數據文件報錯超出 IO 限制的操作

python保存大型 .mat 數據文件報錯超出 IO 限制的操作

熱門標簽:陜西金融外呼系統(tǒng) 激戰(zhàn)2地圖標注 唐山智能外呼系統(tǒng)一般多少錢 白銀外呼系統(tǒng) 海南400電話如何申請 公司電話機器人 哈爾濱ai外呼系統(tǒng)定制 廣告地圖標注app 騰訊外呼線路

python 保存 .mat 文件的大小是有限制的,似乎是 5G 以內,如果需要保存幾十個 G 的數據的話,可以選用其他方式,

比如 h5 文件

import h5py
def h5_data_write(train_data, train_label, test_data, test_label, shuffled_flag):
    print("h5py文件正在寫入磁盤...")
    
    save_path = "../save_test/" + "train_test_split_data_label_" + shuffled_flag + ".h5"
    with h5py.File(save_path, 'w') as f:
        f.create_dataset('train_data', data=train_data)
        f.create_dataset('train_label', data=train_label)
        f.create_dataset('test_data', data=test_data)
        f.create_dataset('test_label', data=test_label)
    print("h5py文件保存成功!")
def h5_data_read(filename):
    """
        keys() : 獲取本文件夾下所有的文件及文件夾的名字
        f['key_name'] : 獲取對應的對象
    """
    file = h5py.File(filename,'r')
    train_data = file['train_data'][:]
    train_label = file['train_label'][:]
    test_data = file['test_data'][:]
    test_label = file['test_label'][:]
    return train_data, train_label, test_data, test_label

補充:通過python 讀MATLAB數據文件 *.mat

背景

在做deeplearning過程中,使用caffe的框架,一般使用matlab來處理圖片(matlab處理圖片相對簡單,高效),用python來生成需要的lmdb文件以及做test產生結果。

所以某些matlab從圖片處理得到的label信息都會以.mat文件供python讀取,同時也python產生的結果信息也需要matlab來做進一步的處理(當然也可以使用txt,不嫌麻煩自己處理結構信息)。

介紹

matlab和python間的數據傳輸一般是基于matlab的文件格式.mat,python中numpy和scipy提供了一些函數,可以很好的對.mat文件的數據進行讀寫和處理。

在這里numpy作用是提供Array功能映射matlab里面的Matrix,而scipy提供了兩個函數loadmat和savemat來讀寫.mat文件。

下面是一個簡單的測試程序

具體的函數用法可以看幫助文檔:

import scipy.io as sio 
import matplotlib.pyplot as plt 
import numpy as np 
 
#matlab文件名 
matfn=u'E:/python/測試程序/162250671_162251656_1244.mat' 
data=sio.loadmat(matfn) 
 
plt.close('all') 
xi=data['xi'] 
yi=data['yi'] 
ui=data['ui'] 
vi=data['vi'] 
plt.figure(1) 
plt.quiver( xi[::5,::5],yi[::5,::5],ui[::5,::5],vi[::5,::5]) 
plt.figure(2) 
plt.contourf(xi,yi,ui) 
plt.show()  
sio.savemat('saveddata.mat', {'xi': xi,'yi': yi,'ui': ui,'vi': vi}) 

示例2

import scipy.io as sio
import numpy as np
 
###下面是講解python怎么讀取.mat文件以及怎么處理得到的結果###
load_fn = 'xxx.mat'
load_data = sio.loadmat(load_fn)
load_matrix = load_data['matrix'] #假設文件中存有字符變量是matrix,例如matlab中save(load_fn, 'matrix');當然可以保存多個save(load_fn, 'matrix_x', 'matrix_y', ...);
load_matrix_row = load_matrix[0] #取了當時matlab中matrix的第一行,python中數組行排列
 
###下面是講解python怎么保存.mat文件供matlab程序使用###
save_fn = 'xxx.mat'
save_array = np.array([1,2,3,4])
sio.savemat(save_fn, {'array': save_array}) #和上面的一樣,存在了array變量的第一行
 
save_array_x = np.array([1,2,3,4])
save_array_y = np.array([5,6,7,8])
sio.savemat(save_fn, {'array_x': save_array_x, 'array_x': save_array_x}) #同理,

鑒于以后的目標主要是利用現有的Matlab數據(.mat或者.txt),主要考慮python導入Matlab數據的問題。以下代碼可以解決python讀取.mat文件的問題。

主要使用sicpy.io即可。

sicpy.io提供了兩個函數loadmat和savemat,非常方便。

# adapted from http://blog.csdn.net/rumswell/article/details/8545087
import scipy.io as sio  
#import matplotlib.pyplot as plt
from pylab import *
import numpy as np   
 
matfn='E:\\Pythonrun\\myuse\\matdata.mat'   # the path of .mat data
data=sio.loadmat(matfn)  
xx=data['matdata']
figure(1)
plot(xx)
show()

以下代碼是讀入txt數據并轉換成數組,方法比較笨,更有效的方法待研究。

from numpy import * 
def file2list(filename):  

    fr = open(filename)  
    array = fr.readlines() #以文件中的每行為一個元素,形成一個list列表  
    num = len(array)  
    returnMat = zeros((num,3))#初始化元素為0的,行號數個列表,其中每個元素仍是列表,元素數是3,在此表示矩陣  
    index = 0   
 
    for line in array:  
        line = line.strip()#去掉一行后的回車符號  
        linelist = line.split(' ')#將一行根據分割符,劃分成多個元素的列表  
        returnMat[index,:] = linelist[0:3]#向矩陣賦值,注意這種賦值方式比較笨拙  
        index +=1  
    return returnMat
 
fname = 'E:\\Pythonrun\\myuse\\num_data.txt'
data= file2list(fname)

補充:Python 讀寫 Matlab Mat 格式數據

1. 非 matlab v7.3 files 讀寫

import scipy.io as sio
import numpy
# matFile 讀取
matFile = 'matlabdata.mat'
datas = sio.loadmat(matFile)
# 加載 matFile 內的數據
# 假設 mat 內保存的變量為 matlabdata
matlabdata = datas['matlabdata']
# matFile 寫入
save_matFile = 'save_matlabdata.mat'
save_matlabdata = np.array([1,2,3,4,5])
sio.savemat(save_matFile, {'array':save_matlabdata})

2. matlab v7.3 files 讀取

如果 matlab 保存 data 時,采用的是 ‘-v7.3',scipy.io.loadmat函數加載數據會出現錯誤:

File "/usr/local/lib/python2.7/dist-packages/scipy/io/matlab/mio.py", line 64, in mat_reader_factory
    raise NotImplementedError('Please use HDF reader for matlab v7.3 files')
NotImplementedError: Please use HDF reader for matlab v7.3 files

可以采用:

import h5py
with h5py.File('matlabdata.mat', 'r') as f:
    f.keys() # matlabdata.mat 中的變量名
datas = h5py.File('matlabdata.mat')['matlabdata'].value

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。

您可能感興趣的文章:
  • python利用Excel讀取和存儲測試數據完成接口自動化教程
  • python pickle存儲、讀取大數據量列表、字典數據的方法
  • Python數據分析入門之教你怎么搭建環(huán)境
  • Python入門之使用pandas分析excel數據
  • python 存儲json數據的操作
  • 詳解python數據結構之棧stack
  • 詳解python數據結構之隊列Queue
  • python中必會的四大高級數據類型(字符,元組,列表,字典)
  • python學習之panda數據分析核心支持庫
  • Python基礎之操作MySQL數據庫
  • Python數據分析入門之數據讀取與存儲

標簽:常德 四川 益陽 惠州 黔西 鷹潭 上海 黑龍江

巨人網絡通訊聲明:本文標題《python保存大型 .mat 數據文件報錯超出 IO 限制的操作》,本文關鍵詞  python,保存,大型,.mat,數據,;如發(fā)現本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統(tǒng)采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《python保存大型 .mat 數據文件報錯超出 IO 限制的操作》相關的同類信息!
  • 本頁收集關于python保存大型 .mat 數據文件報錯超出 IO 限制的操作的相關信息資訊供網民參考!
  • 推薦文章
    亚洲高清免费观看高清完整版在线观看| 中文字幕av一区中文字幕天堂| 亚洲综合在线第一页| 成人午夜电影久久影院| 999精品国产| 伊人在线视频观看| 亚洲天堂2024| 国产日韩欧美久久| 青青青在线观看视频| 免费影院在线观看一区| 国产在线观看不卡| 国产69精品久久久久9| 国产小视频国产精品| 欧美一区二区三区在线视频| 精品久久久久久久大神国产| 国产精品美女久久久久aⅴ国产馆 国产精品美女久久久久av爽李琼 国产精品美女久久久久高潮 | 69精品小视频| 中文字幕亚洲综合久久筱田步美| 日韩久久免费av| 色激情天天射综合网| 一区二区三区四区亚洲| 欧美高清在线视频| thepron国产精品| 精品一区二区免费看| 欧美一区二区公司| 一本到在线视频| 亚洲另类欧美日韩| 欧美黑人精品一区二区不卡| 亚洲ⅴ国产v天堂a无码二区| 国产伦精品一区二区免费| 国产女同无遮挡互慰高潮91| 欧洲熟妇精品视频| 自拍日韩亚洲一区在线| 九九久久九九久久| 这里只有精品66| 日韩高清三级| 欧美一区国产一区| 精品亚洲第一| 国产三区二区一区久久| 不卡视频一区二区| 91成人免费在线观看| 91精品久久久久| 国产精品欧美日韩久久| 国产成人精品在线视频| 欧美怡红院视频一区二区三区| 乱亲女秽乱长久久久| 在线观看欧美日韩国产| 亚洲人午夜精品免费| 日韩电影网在线| 亚洲精品v欧美精品v日韩精品| 日韩精品一区二区三区在线| 日韩欧美一区中文| 日韩三级视频在线看| 日韩一区二区三区av| 欧美一区二区性放荡片| 日韩欧美色综合| 欧美v日韩v国产v| 精品嫩草影院久久| 亚洲国产精品久久久久秋霞不卡| 精品动漫一区二区三区在线观看| 欧美v亚洲v综合ⅴ国产v| 亚洲国产精久久久久久| 日韩精品中文字幕有码专区| 日韩av在线影院| 亚洲免费电影一区| 在线观看成人黄色| 久久精品久久久久| 欧美激情区在线播放| 欧美精品www在线观看| 97人人模人人爽人人喊中文字| 91国内揄拍国内精品对白| 91av国产在线| 国产精品自拍偷拍| 超碰在线97av| 久久国产精品一区二区三区| 日韩女优中文字幕| 亚洲黄色网址在线观看| 国产精品久久..4399| 国产xxxxx视频| 欧美又黄又嫩大片a级| 少妇搡bbbb搡bbb搡打电话| 偷拍女澡堂一区二区三区| 少妇久久久久久久久久| 欧美日韩国产一二三区| 久久精品一级片| 亚洲成人第一网站| 91精品人妻一区二区三区果冻| www男人的天堂| 天堂在线一区二区| 国产精品一区专区| 91蜜桃在线免费视频| 国产精品乱码久久久久久| 一区二区三区在线观看动漫| 日韩欧美视频一区二区三区| 91精品久久久久久久91蜜桃| 日韩电影大全免费观看2023年上 | 日韩av片网站| 国产伦精品一区二区三区88av| 亚洲精品视频久久久| 国产高清在线免费观看| 无码人妻丰满熟妇奶水区码| a视频免费在线观看| 青青国产91久久久久久| 成年人午夜久久久| 亚洲日本在线a| 色爱区综合激月婷婷| 欧美va天堂va视频va在线| 亚洲一区www| 97人人模人人爽人人喊中文字| 成人免费激情视频| 免费成人看片网址| 国产日本在线播放| 一级黄色免费毛片| 99国产精品无码| 亚洲欧美一二三区| 久久精品亚洲| 99久久国产综合精品女不卡| 亚洲精品美国一| 欧美日韩国产a| 尤物tv国产一区| 欧亚精品在线观看| 精品乱色一区二区中文字幕| 国产视频在线观看网站| 黄色三级视频在线播放| 国产黄a三级三级| 欧美日韩a v| 久久字幕精品一区| 国产日韩三级在线| 色婷婷久久99综合精品jk白丝 | 91麻豆国产自产在线观看| 亚洲欧美日韩中文字幕一区二区三区 | 成人一区二区在线| 成年丰满熟妇午夜免费视频| 日本成人黄色网| 精品久久久久久亚洲国产300| 久久久久久久久久久97| 欧美精品入口蜜桃| 国产精品吹潮在线观看| 99久久99久久精品国产片果冻| 色999日韩自偷自拍美女| 91无套直看片红桃| 久久综合狠狠综合久久综青草| 国产成人a v| 国产女同一区二区| 国内精品伊人久久久久av影院| 影音先锋在线亚洲| 亚洲国产另类久久精品| 国产成人在线观看| 91大神福利视频| 电影午夜精品一区二区三区| 欧美日韩电影在线| 国产乱叫456在线| 国产精品久久久久久久久久直播| 国产精品一区二区91| 日韩av播放器| 制服丝袜一区二区三区| 波多野结衣影片| 欧美激情精品久久久久久免费印度 | 亚洲欧美色图小说| 嫩草视频免费在线观看| 日韩黄色高清视频| 中文字幕一区二区三区人妻| 欧美日韩高清在线观看| 91啪亚洲精品| 麻豆影视在线播放| 国产黄色激情视频| 国产精品久久久久久av福利| 91久久香蕉国产日韩欧美9色| 日本中文字幕一区二区视频| 在线观看网站黄| 91在线直播亚洲| 午夜婷婷国产麻豆精品| 青青草原免费观看| 成人av电影天堂| 欧美激情一区二区三区四区 | 先锋影音一区二区三区| 欧美国产欧美综合| 四虎永久免费地址| 午夜在线视频免费观看| 国产一区二区三区丝袜| 亚洲精品97久久中文字幕| 水蜜桃色314在线观看| 精品亚洲永久免费精品 | 中文字幕 91| 不卡av电影在线观看| 成人性视频免费网站| 日韩av片在线播放| 天天操天天干天天做| 亚洲一区亚洲二区亚洲三区| 欧美亚洲免费在线一区| 精品国产av 无码一区二区三区| 五十路熟女丰满大屁股| 亚洲精品一区久久久久久| 日本中文字幕一区二区有限公司| 丁香婷婷激情网| 欧美老少配视频| 琪琪一区二区三区| 国产精品第12页| 亚洲欧美中文在线视频| 国产成人高清在线| 精品97人妻无码中文永久在线| 高清在线观看免费| 日韩精品在线观| 国产美女精品人人做人人爽| 免费看黄色三级| 亚洲缚视频在线观看| 亚洲欧美日韩动漫| 国产艳妇疯狂做爰视频 | 欧美日韩一二区| 亚洲美女少妇撒尿| 国产乱码精品1区2区3区| 日本三级网站在线观看| 中文 日韩 欧美| 三区精品视频| 精品一区二区三区三区| 国产不卡在线视频| 国产在线观看无码免费视频| 韩国成人一区| 精品国产免费视频| 久久天天做天天爱综合色| 免费黄频在线观看| 国语自产精品视频在线看一大j8| 亚洲在线免费播放| 国产美女一区二区三区| 国产在线一级片| 中文字幕乱码人妻综合二区三区| 欧美尤物巨大精品爽| 亚洲国产精品人人做人人爽| 天天操天天摸天天干| 欧美一区二区三区四区夜夜大片 | 成人啪啪18免费游戏链接| 日韩欧美一区二区在线观看| 精品欧美久久久| 五月天欧美精品| 久久欧美一区二区| 少妇高潮久久久| 亚洲成人日韩在线| 日本一区二区精品视频| 日韩激情在线视频| 国产精品毛片无遮挡高清| 日韩美女黄色片| 亚洲av无日韩毛片久久| 国产欧美精品在线| 亚洲一区二区免费视频| 亚洲综合视频在线播放| 国产精品毛片一区二区| 黄色一级片播放| 亚洲一区三区| 亚洲性猛交xxxxwww| 一区二区三区四区不卡视频| 免费观看国产精品| 亚洲一区二区三区日韩| 久久人人爽人人| 日韩欧美aaaaaa| 久久久久久9999| 久久久成人网| 久久在线精品| 欧美一级一区二区三区| 国产成人av免费看| 中文av免费观看| 免费人成年激情视频在线观看| avtt香蕉久久| 男人女人黄一级| 日本亚洲导航| 综合久久五月天| 亚洲图片一区二区| 国产精品2024| 中文字幕永久在线视频| 天天躁日日躁aaaa视频| 九色在线视频观看| 欧美诱惑福利视频| 欧美手机在线视频| 美腿丝袜亚洲三区| 三级精品在线观看| 亚洲国产一二三区| 国产精品免费在线视频| 2018中文字幕第一页| 久久综合一区| 91久久精品国产| 亚洲精品久久在线| 福利一区在线观看| 欧美bbbbb| 18国产免费视频| 无码人妻精品中文字幕| 日批视频在线看| 欧美一级黄色片视频| 日本午夜一区二区三区| 国产精品久久久久久久天堂| 亚洲一品av免费观看| 欧美国产日韩精品免费观看| 日本不卡的三区四区五区| 黄色片中文字幕| 久久成人激情视频| 精品嫩模一区二区三区| 国产精品美女免费| 国产小视频91| 3d动漫精品啪啪1区2区免费 | 国产亚洲视频系列| 中文字幕av资源一区| 青青国产91久久久久久 | 伊人影院中文字幕| 国产高潮免费视频| 亚洲AV无码成人精品一区| 精品无码久久久久久久动漫| 97av影视网在线观看| 婷婷久久伊人| 欧美 日韩 国产一区| 你懂的av在线| 欧美大片久久久| 国产一区二区精彩视频| 天天看片中文字幕| 黄色在线免费观看| 人妻无码一区二区三区久久99 | 色哟哟国产精品色哟哟| 亚洲精品无码久久久| 亚洲视频在线观看一区二区| 九九热国产精品视频| 久久精品亚洲无码| 日本一级大毛片a一| 成人黄色av片| 国产精品初高中精品久久| 91久久精品日日躁夜夜躁国产| 欧美日韩一区二 | 欧美激情一区在线| 国产成人在线视频免费播放| av欧美精品.com| 自拍偷拍精品视频| 日韩激情一区二区三区| 国产一区二区视频在线观看免费| 欧美日韩生活片| www.五月婷婷.com| 日本美女一区二区三区| 国产欧美综合色| 欧美性一二三区| 欧美日韩一区二区在线观看 | 成人在线一区二区三区| 国产成人午夜精品5599| 性中国xxx极品hd| 久久天天综合| 蜜臀精品一区二区三区在线观看 | 亚洲天堂男人网| 日韩精品久久久久久免费| 日韩av一区二区在线播放| 亚洲综合免费视频| 韩国三级中文字幕hd久久精品| 欧美韩国一区二区| 国产视频在线观看一区二区三区| 成人免费的视频| 久久精品一区四区| 亚洲免费资源在线播放| 国产农村妇女毛片精品久久麻豆 | 国产激情视频一区二区在线观看| 波多野洁衣一区| 欧美性生活影院| 日韩不卡在线观看| 国产精品成人免费视频| 强开小嫩苞一区二区三区网站| 永久看看免费大片| 欧美一区免费看| 免费成人av在线播放| 亚洲一区二区三区四区五区黄| 亚洲精品久久久久久久久久久 | 精品久久久久久久人人人人传媒| 中文日韩电影网站| 亚洲国产成人精品女人久久久| 尤物精品国产第一福利三区| 国产视频精品免费播放| 丝袜美腿亚洲一区二区| 久久成人人人人精品欧| 亚洲小视频在线| 深夜精品寂寞黄网站在线观看| 韩剧1988免费观看全集| 国外色69视频在线观看| 精品国产一区二区三区免费 | 妞干网在线观看视频| 欧美日韩人妻精品一区在线| 国产精品theporn动漫| 蜜臀av一区二区在线观看| 免费黄网站欧美| 26uuu久久综合| 在线视频国内自拍亚洲视频| 亚洲视频axxx| 日产精品99久久久久久| 欧美黑人性猛交| 97超级碰碰碰久久久| 成人欧美一区二区三区视频| 欧美二区在线视频| 波多野结衣欲乱| 激情图片小说一区| 91精品免费观看| 成人免费在线网址| 国产精品中文久久久久久| 日本精品999| 午夜精品久久久久久久99水蜜桃| 97超视频免费观看| 免费观看黄色大片| 亚洲天堂一级片| 国产精品一区在线| 欧美日本一区二区三区四区| 一区二区成人精品| 精品一区二区三区日本| 国产天堂在线播放| 国产十六处破外女视频| 日韩一区精品字幕| 2023国产一二三区日本精品2022| 五月综合激情网| 国产视频在线观看一区二区| 国产精品揄拍500视频| 亚洲国产日韩美| 97超碰免费在线观看|