CSV (Comma-Separated Value、カンマ区切り値) は、バッチ データを保存するために使用される一般的なファイル形式です。
csvファイルの書き込み
np.savetxt(frame, array, fmt='%.18e', delimiter=None) • frame : 文件、字符串或产生器,可以是.gz或.bz2的压缩文件 • array : 存入文件的数组 • fmt : 写入文件的格式,例如:%d %.2f %.18e • delimiter : 分割字符串,默认是任何空格
例:
>>> a = np.arange(100).reshape(5,20)>>> np.savetxt('a.csv',a,fmt='%d',delimiter=',')
取得したファイルはこんな感じ
0,1,2,3,4,5,6,7,8,9,10,11,12,13,14,15,16,17,18,19 20,21,22,23,24,25,26,27,28,29,30,31,32,33,34,35,36,37,38,39 40,41,42,43,44,45,46,47,48,49,50,51,52,53,54,55,56,57,58,59 60,61,62,63,64,65,66,67,68,69,70,71,72,73,74,75,76,77,78,79 80,81,82,83,84,85,86,87,88,89,90,91,92,93,94,95,96,97,98,99
パラメータを変更して浮動小数点数を書き込む
>>> a = np.arange(100).reshape(5,20)>>> np.savetxt('a.csv',a,fmt='%.1f',delimiter=',')
0.0,1.0,2.0,3.0,4.0,5.0,6.0,7.0,8.0,9.0,10.0,11.0,12.0,13.0,14.0,15.0,16.0,17.0,18.0,19.0 20.0,21.0,22.0,23.0,24.0,25.0,26.0,27.0,28.0,29.0,30.0,31.0,32.0,33.0,34.0,35.0,36.0,37.0,38.0,39.0 40.0,41.0,42.0,43.0,44.0,45.0,46.0,47.0,48.0,49.0,50.0,51.0,52.0,53.0,54.0,55.0,56.0,57.0,58.0,59.0 60.0,61.0,62.0,63.0,64.0,65.0,66.0,67.0,68.0,69.0,70.0,71.0,72.0,73.0,74.0,75.0,76.0,77.0,78.0,79.0 80.0,81.0,82.0,83.0,84.0,85.0,86.0,87.0,88.0,89.0,90.0,91.0,92.0,93.0,94.0,95.0,96.0,97.0,98.0,99.0
csvファイルの読み込み
np.loadtxt(frame, dtype=np.float, delimiter=None, unpack=False) • frame : 文件、字符串或产生器,可以是.gz或.bz2的压缩文件 • dtype : 数据类型,可选 • delimiter : 分割字符串,默认是任何空格 • unpack : 如果True,读入属性将分别写入不同变量
例:
>>> b = np.loadtxt('a.csv',delimiter=',')>>> b array([[ 0., 1., 2., 3., 4., 5., 6., 7., 8., 9., 10., 11., 12., 13., 14., 15., 16., 17., 18., 19.], [ 20., 21., 22., 23., 24., 25., 26., 27., 28., 29., 30., 31., 32., 33., 34., 35., 36., 37., 38., 39.], [ 40., 41., 42., 43., 44., 45., 46., 47., 48., 49., 50., 51., 52., 53., 54., 55., 56., 57., 58., 59.], [ 60., 61., 62., 63., 64., 65., 66., 67., 68., 69., 70., 71., 72., 73., 74., 75., 76., 77., 78., 79.], [ 80., 81., 82., 83., 84., 85., 86., 87., 88., 89., 90., 91., 92., 93., 94., 95., 96., 97., 98., 99.]])>>> b = np.loadtxt('a.csv',dtype=np.int,delimiter=',')>>> b array([[ 0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16,17, 18, 19], [20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36,37, 38, 39], [40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55, 56,57, 58, 59], [60, 61, 62, 63, 64, 65, 66, 67, 68, 69, 70, 71, 72, 73, 74, 75, 76,77, 78, 79], [80, 81, 82, 83, 84, 85, 86, 87, 88, 89, 90, 91, 92, 93, 94, 95, 96,97, 98, 99]])
CSV は 1 次元と 2 次元の配列のみを効果的に保存できます
np.savetxt() np.loadtxt() は 1 次元と 2 次元の配列のみに効果的にアクセスできます
a.tofile(frame, sep='', format='%s') • frame : 文件、字符串 • sep : 数据分割字符串,如果是空串,写入文件为二进制 • format : 写入数据的格式
例;
>>> a = np.arange(100).reshape(5,10,2)>>> a.tofile("a.dat",sep=',',format='%d')
a.datの内容:
0,1,2,3,4,5,6,7,8,9,10,11,12,13,14,15,16,17,18,19,20,21,22,23,24,25,26,27,28,29,30,31,32,33,34,35,36,37,38,39,40,41,42,43,44,45,46,47,48,49,50,51,52,53,54,55,56,57,58,59,60,61,62,63,64,65,66,67,68,69,70,71,72,73,74,75,76,77,78,79,80,81,82,83,84,85,86,87,88,89,90,91,92,93,94,95,96,97,98,99
区切り文字を指定しないとバイナリファイルが生成され、テキストエディタで読み込むことができません。
np.fromfile(frame, dtype=float, count=‐1, sep='') • frame : 文件、字符串 • dtype : 读取的数据类型 • count : 读入元素个数,‐1表示读入整个文件 • sep : 数据分割字符串,如果是空串,写入文件为二进制
NumPyのrandomサブライブラリ
np.random.*
関数 | description |
---|---|
rand(d 0,d1,.,dn ) | d0-dn、浮動小数点数、[0,1)に基づいて一様分布の乱数配列を作成 |
randn(d0,d1,...,dn) | d0-dnに基づいて作成乱数配列、標準正規分布 |
randint(low[,high,shape]) | 形状に基づいてランダムな整数または整数配列を作成します。範囲は[low,high)です |
seed(s) | 乱数シード、s は指定されたシード値です |
shuffle(a) | は配列 a の最初の軸に従って配置され、配列 a |
permutation(a) | に従って配列を変更します配列 a の最初の軸 1 軸は、配列 a を変更せずに新しい不規則な配列を生成します |
choice(a[,size,replace,p]) | 確率 p で 1 次元配列 a から要素を抽出しますサイズの新しい配列を形成します。shape replace 要素を再利用できるかどうかを示します。デフォルトは False です |
uniform(low,high,size) | は、均一な分布、低い開始値、高い終了値を持つ配列を生成します、サイズは形状です |
normal(loc,scale,size) | は正規分布の配列を生成します、locは平均、スケール標準偏差、サイズは形状です |
poisson(lam,size) | ポアソン分布を持つ配列を生成します。lamはランダムイベントの発生率です。Rate、sizeは形状の統計関数です |
NumPyは直接統計関数
npを提供します
mean(a,axis=None) | 指定された軸、軸整数またはタプルに従って配列 a の関連要素の期待値を計算します |
---|---|
指定された軸に基づいて配列 a の関連要素の加重平均を計算します | |
指定された軸に基づいてaxis axis 配列 a の関連要素の標準偏差を計算します | |
指定された axis に従って配列 a の関連要素の分散を計算します axis | |
配列の計算 aの要素の最小値と最大値 | |
配列aの要素の最小値と最大値を計算添字を1次元削減した後 | |
形状に応じて1次元の添字インデックスを多次元の添字に変換します | |
との差を計算します配列a | |
の要素の最大値と最小値 | の要素の中央値(中央値) |
axis=Noneは標準パラメータです統計関数 | |
関数 |