machine-learning

Imbalanced Data Binary Classification

Hermit / 2019-09-25

不平衡資料 (Imbalanced Data)是很常見於結構化資料的情境之一。比如說我們有一筆保險客戶的資料，有非常多的客戶基本資料(如:居住地、學歷等等)，以及一個對應的反應變數:是否有投保，而這個變量有極大的可能多數為非投保狀態，這種情況就稱為Imbalanced Data，因為最近遇到這個類型的資料分析問題，因此從數篇文章中整理幾個常見的解決方法，這裡主要針對反應變數為binary classificaion的狀態。 […] 因為極度不平衡的資料，將導致我們在訓練分類模型的時候有過度去預測某一類的情況。比如說上述的保險資料，我們持有10萬筆客戶訓練資料，但僅有2000筆資…

Python

How to compose a python(or R) script on linux commander.

Hermit / 2019-08-27

In this article I will show how to bulid a script file on your location. And how to compose the script on Python (or R). You should bulid the Python script on your virtual environment if you want to use the keras CUDA. You should enter your server at begining. […] You can key “dir” to check…

Python

THU Preliminary by Neural Network

Hermit / 2019-08-22

先前剛看完齋藤康毅的深度學習架構，因此最近正在學習使用keras架立神經網路模型，範例檔案都是使用mnist手寫資料，正在練習時突然想到先前東海大學大數據的初賽可以拿來實踐看看。而在嘗試建立好模型後，發現準確度也是高達99%，因此寫這篇文章將架構的部分筆記起來。 […] 因使用Windows 10，所以許多環境設置相比於Linux來說更加繁瑣，因此使用Anaconda來簡化tensorflow gpu CUDA的設置。為了能順利使用keras，所以虛擬環境使用：python3.6 + CUDA 10 + cuDNN 7.4.2 + Tesorflow-GPU + Keras。…

deep-learning

What is deep learning

Hermit / 2019-08-20

最近拜讀Keras之父-Francois Chollet所撰寫的deep learning with python。因此想撰寫一些讀後心得筆記，以留日後自己參考。 […] 很常遇到有人在討論深度學習與機器學習的差異，以及“深度”是深在哪裡。因此有撰寫這篇文章的想法，順便讓自己更清楚的知道這些名詞的差異。在談論何謂深度學習之前，我們要先知道人工智慧以及機器學習、深度學習的關係。應該許多人看過以下這張圖：因此不免俗的，先簡介這三者，再深入探討我們所要談論的“深度”學習。 […] 人工智慧大約於1950年代，當時電腦科學領域內所電腦是否能用來“思考”，在最開始的…

Python

MLB playoff prediction with SVM & Randomforest

Hermit / 2019-08-19

In the same theme,MLB. I will show how to use Python to train a randomforest and SVM classifier. Our target is predicting whether the team will enter the next year playoff or not. Since the playoff qualification depends on the same year’s season game win rate. If we predict the same year…

Git

Simple git tutorial

Hermit / 2019-08-16

This is pretty simple tutorial for update gitlab or github. So I won’t tell you how GIT work. If you want to learn rigorous and precise. This web way help:https://gitbook.tw/. […] You have to build a Repository or a Project on gitlab(or github) […] Make sure you have installed the GIT…

1
2
3
5
6
7
8