spark的自留地(ofbiz/eclipse rcp/shark/opentaps)

因?yàn)? 下的磁盤空間快用完了，所以將mysql的data目錄遷移到/mnt/mysql下，先修改/etc/my.conf:

然后重啟mysql， service mysqld restart
但始終提示啟動(dòng)失敗，查看日志/var/log/mysqld.log，發(fā)現(xiàn)實(shí)際mysql已經(jīng)啟動(dòng)。

編輯/usr/lib/mysql/mysql_config將

問題消除。

但使用mysql本機(jī)訪問時(shí)總是提示無法通過/var/lib/mysql/mysql.sock連接數(shù)據(jù)庫，噢，原來是忘記在/etc/my.cnf中加入client配置了，
增加：

后故障消除。怕自己以后遷移數(shù)據(jù)庫忘記了，還是寫篇blog記下為妙。

好象有日子沒更新過blog了，寫篇來證明博主的存在吧。

好多哥們建了網(wǎng)站，都不知道如何吸引別人的眼球。其實(shí)我覺得的，要么功能，要么內(nèi)容。可是個(gè)人辦的網(wǎng)站，就是二十四小時(shí)掛在網(wǎng)上不停的拷貝粘貼又能做得了多少內(nèi)容？ 懶人自有懶辦法，寫個(gè)程序去抓去？


嗯，想到就得動(dòng)手，不然過陣就忘記了，當(dāng)然嘍，還是謀定而后動(dòng)，打算怎么整呢？先選擇好技術(shù)：

1、誰去抓？好象好多人都推薦使用nutch或是herixtrix，不過我覺得象一般的小網(wǎng)站玩玩，就不必這么費(fèi)事了，就用HTMLParser吧，抓取與解析一體化解決吧。

2、誰來格式化數(shù)據(jù)？同上了，俺用正則習(xí)慣了，正好node + regex 夠你用了。

3、如何存儲(chǔ)抓來的數(shù)據(jù)？ 我是用慣JavaEE了，那就 ibatis + mysql 吧，hiberate 就不必了，雖然我沒打算做個(gè)多高負(fù)載的應(yīng)用，但hibernate怎么也感覺不是很合適吧？ （喜歡hiberate別拍磚，我不喜歡口水戰(zhàn)，各人有自喜好，而且hibernate我也很喜歡）

4、如何把你抓來的數(shù)據(jù)表現(xiàn)出來呢？ 這個(gè)就得看你自己的需要嘍，CMS 還是 B2B電子商務(wù)程序？ 還是一個(gè) CRM或ERP程序(如果這樣的話，倒不妨試試opentaps？）

5、性能是不是問題？ 如果你打算做個(gè)專業(yè)的搜索引擎或是阿里巴巴之類的電子商務(wù)引擎，除去硬件的考慮、數(shù)據(jù)庫的優(yōu)化，也許你要更多地考慮cache的管理，還有可能考慮文件索引（如用lunece）

6、差點(diǎn)忘記了，誰來調(diào)度這些爬蟲及程序之間的任務(wù)執(zhí)行順序呢？ 試試Quartz？！

又犯困了，先寫這吧，正好有個(gè)朋友要我?guī)兔χ笇?dǎo)做個(gè)類似玩意兒，下次再記錄吧。

所有 HTTP 狀態(tài)代碼及其定義。
代碼  指示  
2xx  成功  
200  正常；請(qǐng)求已完成。  
201  正常；緊接 POST 命令。  
202  正常；已接受用于處理，但處理尚未完成。  
203  正常；部分信息 — 返回的信息只是一部分。  
204  正常；無響應(yīng) — 已接收請(qǐng)求，但不存在要回送的信息。  
3xx  重定向  
301  已移動(dòng) — 請(qǐng)求的數(shù)據(jù)具有新的位置且更改是永久的。  
302  已找到 — 請(qǐng)求的數(shù)據(jù)臨時(shí)具有不同 URI。  
303  請(qǐng)參閱其它 — 可在另一 URI 下找到對(duì)請(qǐng)求的響應(yīng)，且應(yīng)使用 GET 方法檢索此響應(yīng)。  
304  未修改 — 未按預(yù)期修改文檔。  
305  使用代理 — 必須通過位置字段中提供的代理來訪問請(qǐng)求的資源。  
306  未使用 — 不再使用；保留此代碼以便將來使用。  
4xx  客戶機(jī)中出現(xiàn)的錯(cuò)誤  
400  錯(cuò)誤請(qǐng)求 — 請(qǐng)求中有語法問題，或不能滿足請(qǐng)求。  
401  未授權(quán) — 未授權(quán)客戶機(jī)訪問數(shù)據(jù)。  
402  需要付款 — 表示計(jì)費(fèi)系統(tǒng)已有效。  
403  禁止 — 即使有授權(quán)也不需要訪問。  
404  找不到 — 服務(wù)器找不到給定的資源；文檔不存在。  
407  代理認(rèn)證請(qǐng)求 — 客戶機(jī)首先必須使用代理認(rèn)證自身。  
415  介質(zhì)類型不受支持 — 服務(wù)器拒絕服務(wù)請(qǐng)求，因?yàn)椴恢С终?qǐng)求實(shí)體的格式。  
5xx  服務(wù)器中出現(xiàn)的錯(cuò)誤  
500  內(nèi)部錯(cuò)誤 — 因?yàn)橐馔馇闆r，服務(wù)器不能完成請(qǐng)求。  
501  未執(zhí)行 — 服務(wù)器不支持請(qǐng)求的工具。  
502  錯(cuò)誤網(wǎng)關(guān) — 服務(wù)器接收到來自上游服務(wù)器的無效響應(yīng)。  
503  無法獲得服務(wù) — 由于臨時(shí)過載或維護(hù)，服務(wù)器無法處理請(qǐng)求。
-----------------------------------------------------------------------------------------------------------------------
HTTP 400 - 請(qǐng)求無效 
HTTP 401.1 - 未授權(quán)：登錄失敗 
HTTP 401.2 - 未授權(quán)：服務(wù)器配置問題導(dǎo)致登錄失敗 
HTTP 401.3 - ACL 禁止訪問資源 
HTTP 401.4 - 未授權(quán)：授權(quán)被篩選器拒絕 
HTTP 401.5 - 未授權(quán)：ISAPI 或 CGI 授權(quán)失敗  
HTTP 403 - 禁止訪問 
HTTP 403 - 對(duì) Internet 服務(wù)管理器 (HTML) 的訪問僅限于 Localhost 
HTTP 403.1 禁止訪問：禁止可執(zhí)行訪問 
HTTP 403.2 - 禁止訪問：禁止讀訪問 
HTTP 403.3 - 禁止訪問：禁止寫訪問 
HTTP 403.4 - 禁止訪問：要求 SSL 
HTTP 403.5 - 禁止訪問：要求 SSL 128 
HTTP 403.6 - 禁止訪問：IP 地址被拒絕 
HTTP 403.7 - 禁止訪問：要求客戶證書 
HTTP 403.8 - 禁止訪問：禁止站點(diǎn)訪問 
HTTP 403.9 - 禁止訪問：連接的用戶過多 
HTTP 403.10 - 禁止訪問：配置無效 
HTTP 403.11 - 禁止訪問：密碼更改 
HTTP 403.12 - 禁止訪問：映射器拒絕訪問 
HTTP 403.13 - 禁止訪問：客戶證書已被吊銷 
HTTP 403.15 - 禁止訪問：客戶訪問許可過多 
HTTP 403.16 - 禁止訪問：客戶證書不可信或者無效 
HTTP 403.17 - 禁止訪問：客戶證書已經(jīng)到期或者尚未生效 
HTTP 404.1 - 無法找到 Web 站點(diǎn) 
HTTP 404 - 無法找到文件 
HTTP 405 - 資源被禁止 
HTTP 406 - 無法接受 
HTTP 407 - 要求代理身份驗(yàn)證 
HTTP 410 - 永遠(yuǎn)不可用 
HTTP 412 - 先決條件失敗 
HTTP 414 - 請(qǐng)求 - URI 太長(zhǎng) 
HTTP 500 - 內(nèi)部服務(wù)器錯(cuò)誤 
HTTP 500.100 - 內(nèi)部服務(wù)器錯(cuò)誤 - ASP 錯(cuò)誤 
HTTP 500-11 服務(wù)器關(guān)閉 
HTTP 500-12 應(yīng)用程序重新啟動(dòng) 
HTTP 500-13 - 服務(wù)器太忙 
HTTP 500-14 - 應(yīng)用程序無效 
HTTP 500-15 - 不允許請(qǐng)求 global.asa 
Error 501 - 未實(shí)現(xiàn) 
HTTP 502 - 網(wǎng)關(guān)錯(cuò)誤 

為了進(jìn)一步了解ofbiz/opentaps的ER模型，硬著頭皮看了《The Data Model Resource Book》差不多兩周。雖然還是有些地方有點(diǎn)吃不準(zhǔn)，總體來說還是收益良多。我嘗試將它的思想與我以往用過或是我了解的對(duì)業(yè)務(wù)建模的ER模型進(jìn)行對(duì)比，可以在以后的開發(fā)中汲取經(jīng)驗(yàn)：

1、實(shí)體之間的關(guān)系或是本身的描述都是有生命周期的，這一點(diǎn)從ER Diagram中隨處可見的From Date 與Thru Date可以充分體現(xiàn)出來。

2、以第三方角度對(duì)業(yè)務(wù)建模而非“我”方角度建模，這個(gè)比較有趣，通常來說我們會(huì)把銷售訂單與采購訂單分成兩個(gè)實(shí)體，這是因?yàn)槲覀儚氖褂谜呓嵌葋砜翠N售訂單與采購訂單是不同的業(yè)務(wù)類型，而從第三方角度來著，銷售訂單與采購訂單都是當(dāng)事人之間發(fā)生的采購/銷售業(yè)務(wù)，關(guān)心的業(yè)務(wù)內(nèi)容與屬性完全一致，而這樣建?？梢詭泶罅康臉I(yè)務(wù)邏輯共用與可擴(kuò)展性。

3、抽象層次較高的業(yè)務(wù)實(shí)體，通過屬性內(nèi)容進(jìn)一步細(xì)化業(yè)務(wù)對(duì)象。

這是我感覺比較重點(diǎn)的幾個(gè)點(diǎn)，先記下！

看opentaps關(guān)于庫存管理的文檔時(shí),總是被Serialized Inventory Item與Non Serialized Inventory Item弄得一頭霧水.

看了一下<<The Data Model Resource Book>>的這段話才弄明白：
The INVENTORY ITEM may be either a SERIALIZED INVENTORY ITEM,which means each item's serial num(ber) is tracked, or a NON-SERIALIZED
INVENTORY ITEM, which means a group of items is tracked together and the quantity on hand for these is maintained by their location.

即產(chǎn)品是按個(gè)體單獨(dú)跟蹤，還是按相同群體特征進(jìn)行數(shù)據(jù)和存放地點(diǎn)跟蹤管理．

記下來，不要下次再忘記了！

今天又是一陣頭痛,上午網(wǎng)絡(luò)超不好,老是連不入服務(wù)器,搞得服務(wù)器越來越慢,也不知道原因,在服務(wù)器上運(yùn)行
netstat -anp|grep 服務(wù)端口號(hào) |grep TIME_WAIT|wc -l 一看,幾百個(gè)死連接在等待處理呢.

怎么辦?上網(wǎng)查了下資料,原來是可惡的TCP/IP棧,調(diào)整一下timeout相關(guān)參數(shù):


嘿,立竿見影,死連接數(shù)立即就下去了,很少看得到TIME_WAIT的連接了.

兄弟們不知道是否有被要求24小時(shí)不允許關(guān)機(jī)的痛苦經(jīng)歷，有時(shí)半夜正在做著美夢(mèng)卻被客戶或老板抓起來一通臭罵，服務(wù)器怎么回事down了，網(wǎng)站訪問不了... 唉，真是痛不欲生呀！

經(jīng)歷過N次折磨后，我下定決心要改變這種情況，想一下，也許我可以寫個(gè)crontab來監(jiān)控程序的運(yùn)行情況，如果服務(wù)停止或發(fā)生了不可修復(fù)的錯(cuò)誤時(shí)，自動(dòng)重啟服務(wù)器，這樣我就不用擔(dān)心半夜被人抓起來罵了。

說動(dòng)手就動(dòng)手，雖說我linux/unix腳本不是很熟，但我想應(yīng)該也難不到我，左瞧瞧右看看，拼出了一個(gè)腳本，給大家參考下，大家可以修改下路徑與端口適應(yīng)自己的程序：

然后在crontab中定時(shí)執(zhí)行此腳本，就可以了！嘿... 這下鬧心的電話少多了，當(dāng)然不要忘記定時(shí)去看下日志哦！

本人原創(chuàng)文章，轉(zhuǎn)載請(qǐng)注明出處！

在同si chen的溝通中,他覺得pentaho是一個(gè)很不錯(cuò)的東東,如果把它同業(yè)務(wù)數(shù)據(jù)結(jié)合起來進(jìn)行分析,可能會(huì)產(chǎn)生一些非常美妙的結(jié)果.于是有想好好了解一下pentaho的愿望.

本人的學(xué)習(xí)習(xí)慣一直的方針是:如果一個(gè)東東不能讓我在30分鐘內(nèi)跑出它的demo,我暫時(shí)是不會(huì)去了解它的(竊以為這叫不夠友好也不夠成品化)

pentaho這點(diǎn)很爭(zhēng)氣,下載下來解壓,雙擊"start-pentaho.bat" 文件就順利的跑起來了. (不過究竟應(yīng)該下載哪個(gè)文件讓我頭痛好久, 網(wǎng)上大多都是介紹1.x的安裝,我睜大眼也沒找到啥pre-install版本,犯迷糊的兄弟直接在 http://sourceforge.net/projects/pentaho/ 下載 Business Intelligence Server 吧)

接下來先看看它包含的內(nèi)容 (http://www.pentaho.com/about/) :

 

依慣例開篇先吹水:

Pentaho是一個(gè)可以替代商業(yè)智能的開源方案.Pentaho Open BI套件提供全面的報(bào)表,OLAP分析,儀表板,數(shù)據(jù)集成,數(shù)據(jù)采集及商業(yè)智能平臺(tái),是世界領(lǐng)先而且廣泛使用的開源商業(yè)智能套件.Pentaho商業(yè)開源業(yè)務(wù)模型減少了軟件授權(quán)費(fèi)用,提供支持,服務(wù)以及產(chǎn)品增強(qiáng)年度訂閱.從Pentaho開創(chuàng)至今一直是開源商業(yè)智能的先鋒,Pentaho產(chǎn)品已經(jīng)被下載超過3百萬次,產(chǎn)品應(yīng)用于從小企業(yè)到全球2000強(qiáng)的企業(yè)中.

經(jīng)驗(yàn)豐富的團(tuán)隊(duì)

由包括 Business Objects, Cognos, Hyperion, IBM, JBoss, Oracle, Red Hat, 及SAS協(xié)會(huì)等業(yè)界領(lǐng)導(dǎo)者供應(yīng)商的退休人士創(chuàng)建

廣泛的能力

報(bào)表                            數(shù)據(jù)集成                    
分析                            數(shù)據(jù)采集
儀表板                        商業(yè)智能平臺(tái)

 

高伸縮性

Pentaho是世界廣泛部署的開源商業(yè)智能套件.可以提供給不同規(guī)模不同行業(yè)的企業(yè)使用.

Pentaho是在開源領(lǐng)域內(nèi)首個(gè)且唯一的全面商業(yè)智能平臺(tái),全部來源于開源社區(qū)中.

Pentaho是唯一在開源商業(yè)智能套件領(lǐng)域內(nèi)即是核心項(xiàng)目領(lǐng)導(dǎo)者也是贊助者的產(chǎn)品.其它整合非他們贊助或控制的第三方商業(yè)智能模塊的商業(yè)智能套件,不能提供專業(yè)水準(zhǔn)、服務(wù)承諾、或產(chǎn)品路線圖。而Pentaho可以做到。

Pentaho商業(yè)開源業(yè)務(wù)模型減少軟件授權(quán)費(fèi)用，提供支持，服務(wù)以及通過年度訂閱獲得產(chǎn)品增強(qiáng)內(nèi)容。

可伸縮的部署

完整，集成的商業(yè)智能平臺(tái)
獨(dú)立的，開箱即用的產(chǎn)品
為Java開發(fā)人員提供可嵌入的組件

 

高品質(zhì)的專業(yè)服務(wù)

特制的支持提供
有經(jīng)驗(yàn)的顧問及世界范圍內(nèi)的顧問合作者
一站式，公共，在線培訓(xùn)及專業(yè)認(rèn)證項(xiàng)
提供使用Pentaho技術(shù)進(jìn)行OEM服務(wù)

嗯,看著好象很不錯(cuò)的樣子,以后每天看半小時(shí)!

本人譯自 http://www.pentaho.com/about/ , 轉(zhuǎn)載請(qǐng)注明出處!

     摘要: 我們?cè)谥谱鲉巫C或報(bào)表時(shí)，客戶經(jīng)常要我們把最后的合計(jì)數(shù)轉(zhuǎn)寫中文大寫金額。這個(gè)需求很合理，但感覺并不容易實(shí)現(xiàn)，如何在JasperReport中加入大寫金額的實(shí)現(xiàn)呢？提供一種實(shí)現(xiàn)的方法給大家參考。 實(shí)現(xiàn)思路： 在報(bào)表執(zhí)行過程中使用scirptlet將存放著數(shù)字金額的變量讀出轉(zhuǎn)換成大寫金額字符串后放入大寫金額變量中。報(bào)表即可象顯示普通字符變量一樣顯示大寫金額。 TransChineseMon...  閱讀全文

明明不是DBA，時(shí)不時(shí)也得干下屬于他們的活。

“老大，我刪除數(shù)據(jù)庫用戶時(shí)老是出錯(cuò)呀！報(bào)"ORA-01940: 無法刪除當(dāng)前已連接的用戶"的錯(cuò)”

“廢話，全世界都掛在上面，你看會(huì)話中幾十個(gè)主連在上面，怎么刪除呀？”

小弟一臉無辜的站在面前：“這個(gè)數(shù)據(jù)要更新一下，我總不能一個(gè)個(gè)去求他們斷線吧？腿都要跑斷的啦！”

“唉，那就強(qiáng)斷吧！”

挨個(gè)踢吧！

喂，你怎么把我踢出來了？我的結(jié)果還沒跑完呢...