在目標資料夾內!!

git branch 確認現在git branch名稱

git status 確認目前你更新了什麼檔案 和增加的檔案

git add -A 更新目錄連結

git commit -m “要留下的訊息” 紀錄這次的改動

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

簡單講解一下編譯project的source code需要注意的事項

背景是在Renjin中寫一個連絡到HBase的管道 而在運作時出錯

今天主要是Renjin這專案使用到的com.google.guava 17.0版本

而HBase使用的是12版本 以至於 整個project載到17版本

而HBase因此用了deprecated或change過的method名或建構方式

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

環境:HBase 1.0.1 Hadoop 2.6.0

前言:HBase 1.x版本 Client端 的Java API有換過

為了避免大家花太多時間在這個環境使用的問題上

分享一下自己確定可以跑的程式讓大家可以省時省力

目的:根據conifg裡面的檔案去抓到對應的hadoop,hbase位置

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

環境,前置作業:

Ubuntu 14.04

ssh安裝

Hadoop2.6.0

環境 每台的使用者都是yjh

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

前置需求:

SSH

Hadoop2.6.0

HBase1.0.0

其實步驟十分容易,

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

因為整個連結過程說難不難 說簡單又很容易打結

所以想留點紀錄避免其他人在走一次

前置作業 : 

          首先要先開好架設於Hadoop, HBase, 上的Phoenix

          我的實驗環境是以VM ware開好 Phoenix叢集  再以windows 下的R Studio執行指令

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

在R studio中
安裝完package後 

執行library(rJava)

會跑出關於namespace()的錯誤訊息

找了一下發現很多人都碰到這問題 解法不一

yjhyjhyjh0 發表在 痞客邦 留言(0) 人氣()

1

這篇文章的目的是 讓想理解Spark 這高速運算核心概念的人看得

我會試著用自己的話讓大家理解
讓大家可以淺顯易懂的理解核心技術 RDD(Resilient Distributed Datasets)

---------------------------------------前言-----------------------------------------------------------------

首先先來看MapReduce 為我們做了什麼

yjhyjhyjh0 發表在 痞客邦 留言(2) 人氣()

前置作業:

安裝java

安裝ssh 並設置好無密碼登入

安裝好hadoop-2.6.0 分散式

版本:

yjhyjhyjh0 發表在 痞客邦 留言(2) 人氣()

實驗室需求  常常從裝 
途中可能會遇到不少問題 不過大家遇到的問題都很類似 所以不用洩氣!
如果要一勞永逸的話 最好去 logs/hbase-使用者名 中找log裡的Error 以後才不會重蹈覆轍
此文不少地方是參考大白鷺聖經的!

正文:

yjhyjhyjh0 發表在 痞客邦 留言(1) 人氣()

1
Blog Stats
⚠️

成人內容提醒

本部落格內容僅限年滿十八歲者瀏覽。
若您未滿十八歲,請立即離開。

已滿十八歲者,亦請勿將內容提供給未成年人士。