machine-learning

Ghalat Machine Learning

Hermit / 2020-08-28

這次來測試自動化機器學習套件：Ghalat Machine Learning，主要針對回歸問題與分類問題的自動化學習。目前套件具有以下功能： 1.自動特徵工程 2.自動選擇機器學習和神經網路模型 3.自動超參數調校 4.排序模型效果（根據交叉驗證分數） 5.推薦最佳模型我將使用UCI breast cancer dataset(sklearn dataset)來測試此套件for分類的效果以及使用情況。套件作者Github：https://github.com/Muhammad4hmed/Ghalat-Machine-Learning Pypl套件說明：…

gan

Compare to OCGAN & SMOTE & ADASYN in CRE data Simulation

Hermit / 2020-02-25

與上禮拜那篇文章一樣，只是這次將資料改為CRE data，希望也有良好的表現。 […] import pandas as pd import numpy as np from sklearn import datasets # import some data to play with df = pd.read_csv('C:/Users/User/OneDrive - student.nsysu.edu.tw/Educations/NSYSU/fu_chung/bacterial/123.csv') x = df.iloc[:,0:1471] y =…

machine-learning

Find The Special Sample in CRE data

Hermit / 2020-02-19

上次在挑選變數並建立分類模型的loocv時(link :https://hermitlin.netlify.com/post/2020/02/14/cre-features-selection/) ，最高的準確率來自adaboost的結果，且落在使用60~70個randomforest importance的變數，但當時多個模型準確率為0.989473684，即存在一個樣本預測錯誤，因此想知道是否在這些模型中，預測錯誤的皆為同一筆樣本。本次將預測的結果先行挑出，並將錯誤的樣本index建立成表，以方便觀察多為那些樣本為容易預測失敗的樣本。 […] 先讀入資料與之前R…

gan

Compare to OCGAN & SMOTE & ADASYN in breast cancer data Simulation

Hermit / 2020-02-18

這次我使用sklearn內建的資料集breast-cancer(原始資料來源：https://archive.ics.uci.edu/ml/datasets/Breast+Cancer+Wisconsin+(Diagnostic)) ，先將原資料以7:3比例建立一個的資料分類器出來，之後把其中一個類別挑出，並使用各種oversampling的方法來模擬樣本，並最終將模擬後的資料套回最初的模型當中，比較各方法產生的樣本能否在分類器當中回到原本的類別當中。 […] 讀取sklearn的資料並轉為dataframe： import pandas as pd import numpy…

machine-learning

CRE features selection

Hermit / 2020-02-14

This time I will use the scikit-learn module to bulid the classifiers,and I will use the randomforest’s importance to choose the explanatory variables. […] import pandas as pd import numpy as np df = pd.read_csv('C:/Users/User/OneDrive -…

Python

CRE data features selection

Hermit / 2020-02-10

這次僅針對CRE data的模型變數選擇，主要以下面python的forward backward selection的方式進行挑選，主要方式為：將所有資料的百分之六十切出，進行變數篩選，並使用loocv的方式比較不同變數模型的準確度差異。 […] import pandas as pd import numpy as np df = pd.read_csv('C:/Users/User/OneDrive - student.nsysu.edu.tw/Educations/NSYSU/fu_chung/bacterial/123.csv') from…