2012-04-24

新手的 Neo4j + Python

因為我在公司使用 Ubuntu 11.10, 參考這一頁安裝時,需要留意一下... 不需要安裝 Neo4j community 1.7。 如果要安裝 neo4j-embedded 的話:
  1. 直接 sudo apt-get install python-jpype ,不用下載了。
  2. 如果一定要下載來自己編譯,可以用 sudo JAVA_HOME=/usr/lib/jvm/java-6-sun python setup.py install
  3. sudo apt-get install python-pip
  4. sudo pip install neo4j-embedded
就可以開始玩了... 網路上有好多 demo, 寫得好複雜的樣子,晚一點再來看有沒有簡單一點的。 啊。搞錯了。 用 neo4j-embedded 雖然沒什麼問題,但是公司的應用必須有 standalone server,而且把服務跑起來,才能用 browser,所以要安裝 neo4j-community:
  1. sudo ./neo4j-community-1.7/bin/neo4j install 安裝服務
  2. sudo -u neo4j /etc/init.d/neo4j-service start 把Neo4j打開
  3. 用瀏覽器看 http://localhost:7474/webadmin/
Python 可以用的 RESTful client 有兩個: neo4jrestclient 和 py2neo。 公司的 VM 上要安裝新軟體很痛苦,所以我本來應該裝 py2neo,可是因為 neo4jrestclient 包裝得和 neo4j-embedded 很像,所以下面的例子用的是 neo4jrestclient:
# 有名的 The Matrix 的例子
from neo4jrestclient.client import GraphDatabase
db = GraphDatabase("http://localhost:7474/db/data/")

thomas = db.node(name = 'Thomas Anderson', age = 29)
trinity = db.node(name = 'Trinity')
morpheus = db.node(name = 'Morpheus', rank = 'Captain', occupation = 'total badass')
cypher = db.node(name = 'Cypher', lastname = 'Reagan')
agentSmith = db.node(name = 'Agent Smith', version = '1.0b', language = 'C++')
architect = db.node(name = 'The Architect')
thomas.KNOWS(trinity)
trinity.LOVES(thomas, since = 'meeting the oracle')
thomas.KNOWS(morpheus)
trinity.KNOWS(cypher, since = 'a year before the movie', cooperatesOn = 'The Nebuchadnezzar')
cypher.KNOWS(agentSmith, disclosure = 'secret')
agentSmith.CODEDBY(architect)
搞定後,就可以用 python 命令列來玩耍:
>>> from neo4jrestclient.client import GraphDatabase
>>> gdb = GraphDatabase("http://localhost:7474/db/data/")
>>> n = gdb.node[5] # 假設 Trinity 是 node[5] 可以去 browser 看 :)
>>> n.relationships.all()[:]
[<Neo4j Relationship: http://localhost:7474/db/data/relationship/8>, <Neo4j Relationship: http://localhost:7474/db/data/relationship/5>, <Neo4j Relationship: http://localhost:7474/db/data/relationship/6>]
>>> n.relationships.all()[0].type
'KNOWS'
>>> n.relationships.all()[0].start
<Neo4j Node: http://localhost:7474/db/data/node/5>
>>> n.relationships.all()[0].end
<Neo4j Node: http://localhost:7474/db/data/node/7>
>>> n.relationships.all()[0].properties
{u'since': u'a year before the movie', u'cooperatesOn': u'The Nebuchadnezzar'}
然後是 traversals:
>>> from neo4jrestclient import client
>>> n.traverse(types=[client.All.KNOWS])[:]
[<Neo4j Node: http://localhost:7474/db/data/node/7>, <Neo4j Node: http://localhost:7474/db/data/node/4>]
>>> n.traverse(types=[client.Outgoing.KNOWS])[:]
[<Neo4j Node: http://localhost:7474/db/data/node/7>]
>>> n.traverse(types=[client.Incoming.KNOWS])[:]
[<Neo4j Node: http://localhost:7474/db/data/node/4>]
比方說想找 Trinity KNOWS 的人 KNOWS 的... (我為了舉例多加了一些關係)
# Ruby 寫起來好漂亮 T_T ==> me.outoging(:frienship).outgoing(:datingship)
>>> [n.traverse(types=[Outgoing.KNOWS])[:] for n in trinity.traverse(types=[Outgoing.KNOWS])[:]]
[[<Neo4j Node: http://127.0.0.1:7474/db/data/node/8>], [<Neo4j Node: http://127.0.0.1:7474/db/data/node/5>, <Neo4j Node: http://127.0.0.1:7474/db/data/node/4>]]
# 也可以接上 neo4j 的範例...
>>> gdb.traversal().relationships('KNOWS').traverse(trinity).nodes[:]
[<Neo4j Node: http://127.0.0.1:7474/db/data/node/7>, <Neo4j Node: http://127.0.0.1:7474/db/data/node/6>, <Neo4j Node: http://127.0.0.1:7474/db/data/node/4>]
# Incoming 和 Outgoing 直接偷偷用關鍵字...
>>> gdb.traversal().relationships('KNOWS', 'out').traverse(trinity).nodes[:]
[<Neo4j Node: http://127.0.0.1:7474/db/data/node/7>, <Neo4j Node: http://127.0.0.1:7474/db/data/node/6>]
>>> gdb.traversal().relationships('KNOWS', 'in').traverse(trinity).nodes[:]
[<Neo4j Node: http://127.0.0.1:7474/db/data/node/4>]

2012-04-19

Migrate "Simple Web App" to Clojure 1.3.0

Another trial to migrate Mark McGranaghan's awesome example of Developing and Deploying a Simple Clojure Web Application to Clojure 1.3.0. First, project.clj: remove clojure-contrib and refresh the revisions...
defproject adder "0.0.1"
  :description "Add two numbers."
  :dependencies
  [[org.clojure/clojure "1.3.0"]
   [ring/ring-core "1.1.0-RC1"]
   [ring/ring-devel "1.1.0-RC1"]
   [ring/ring-jetty-adapter "1.1.0-RC1"]
   [compojure "1.0.2"]
   [hiccup "1.0.0-RC2"]]
  :dev-dependencies
  [[lein-run "1.0.0-SNAPSHOT"]])
hiccup.page-helper became hiccup.page, and we have to add ring.middleware.params after Compojure 0.6.0!!! (Really painful to find out why POST isn't working anymore.) In core.clj:
(:use [compojure.core]
      [hiccup.core]
      [hiccup.page]
      [ring.middleware.reload]
      [ring.middleware.stacktrace]
      [ring.util.response]
      [ring.middleware.file]
      [ring.middleware.file-info]
      [ring.middleware.params :only [wrap-params]])

; and for app ...
(def app
  (-> #'handler
      (wrap-params handler)
      (wrap-utf)
      (wrap-file "public")
      (wrap-file-info)
      (wrap-request-logging)
      (wrap-if development? wrap-reload '[adder.middleware adder.core])
      (wrap-bounce-favicon)
      (wrap-if production?  wrap-failsafe)
      (wrap-if development? wrap-stacktrace)))
Others are just like they were in Mark's brilliant tutorial. The source code is available here.

Migrate "REST" to Clojure 1.3.0 with Slingshot

I'm really inspired by Mark McGranaghan's Building REST APIs for Clojure Web Applications. It uses Clojure 1.2.0, but I'm really fancy at new things and wanted to port the code to Clojure 1.3.0. I learned that clojure.contrib is no longer in use and clojure.contrib.condition is now replaced by Steve Gilardi's Slingshot. So I hacked a bit ... I'm not sure if my codes are good enough. Comments are more than welcome. Changes in web.clj:
  (:use [compojure.core]
        [ring.middleware.json-params]
        [slingshot.slingshot :only [try+]])
; ...
(defn wrap-error-handling [handler]
  (fn [req]
      (try+
       (or (handler req)
           (json-response {"error" "resource not found"} 404))
       (catch JsonParseException e
              (json-response {"error" "malformed json"} 400))
       (catch [:type :bad-req] {:keys [reason message]}
              (json-response {"error" message} (error-codes reason))))))
Changes in elem.clj
  (:use [slingshot.slingshot :only [throw+]])
; ...
(defn get [id]
  (or (@elems id)
      (throw+ {:type :bad-req :reason :not-found
              :message (format "elem '%s' not found" id)})))

(defn put [id attrs]
  (if (empty? attrs)
      (throw+ {:type :bad-req :reason :invalid
              :message "attrs are empty"})
; ...
And it passes test.sh: (Sorry! I don't know how to write lein test cases.)
{}
{"error":"elem '1' not found"}
{"group":"bar"}
{"group":"biz","tag":"bat"}
{"group":"bar"}
{"2":{"group":"biz","tag":"bat"}}
{"error":"elem '3' not found"}
{"error":"resource not found"}
{"error":"malformed json"}400
{"error":"elem '3' not found"}404
{"error":"attrs are empty"}400
You may download the example here.

2012-04-14

Clojure

大部份資料都 Google 得到,這裡只是做個筆記。 下載 1.3.0 版後,直接解開來就可以用了。當然如果安裝 lein 會更優。lein 會把所有的東西都放在自己的目錄裡,所以在這家公司也沒問題。
C:\download\clojure-1.3.0>java -jar clojure-1.3.0.jar
Clojure 1.3.0
user=> (println "Hello World")
Hello World
nil
user=> (javax.swing.JOptionPane/showMessageDialog nil "Hello World")
nil
user=>
資料: 筆記:
; System.out.println()
(println "Hello World")
; Swing
(javax.swing.JOptionPane/showMessageDialog nil "Hello World")
;
; Name space
;
(def v1 10)     ; user/v1
(in-ns 'myapp)
(def v1 100)    ; myapp/v1
(in-ns 'user)
v1              ; = 10
myapp/v1        ; = 100
;
; Polymorphism
;
(defn force-it
    "The first function a young jedi needs"
    ([]
        (str "Use the force, Luke"))
    ([jedi]
        (str "Use the force, " jedi)))
;
; Lambda
;
(map (fn [x] (* 2 x)) v)  ; v = (2 4 6 8)
(map #(* 2 %) v)          ; #() = lambda
;
;
;
;
;
;
(take 10 (cycle [1 2 3 4]))
; ==> (1 2 3 4 1 2 3 4 1 2)
(interleave [:a :b :c :d :e] [1 2 3 4 5])
; ==> (:a 1 :b 2 :c 3 :d 4 :e 5)
(partition 3 [1 2 3 4 5 6 7 8 9 10])
; ==> ((1 2 3) (4 5 6) (7 8 9))
(map vector [:a :b :c :d :e] [1 2 3 4 5])
; ==> ([:a 1] [:b 2] [:c 3] [:d 4] [:e 5])
(apply str (interpose \, "asdf"))
; ==> "a,s,d,f"
(interpose \, "asdf")
; ==> (\a \, \s \, \d \, \f)
(System/getProperties)
; ==> #<Properties {java.runtime.name=Diablo Java(TM) SE Runtime Environment, sun.boot.library.path=/usr/local/diablo-jdk1.6.0/jre/lib/amd64, ...
(first (System/getProperties))
; ==> #<Entry java.runtime.name=Diablo Java(TM) SE Runtime Environment>
(.getBytes "Hello")
; ==> #<byte[] [B@5eea3cdf>
(first (.getBytes "Hello"))
; ==> 72
(re-seq #"\w+" "the quick brown fox")
; ==> ("the" "quick" "brown" "fox")
(sort (re-seq #"\w+" "the quick brown fox"))
; ==> ("brown" "fox" "quick" "the")
(java.io.File. ".")
; ==> #<File .>
(take 5 (file-seq (java.io.File. ".")))
; ==> (#<File .> #<File ./.cshrc> #<File ./.login> #<File ./.mail_aliases> #<File ./.login_conf>)
(count (file-seq (java.io.File. ".")))
; ==> 16760
(with-open [rdr (reader "README")] (count (line-seq rdr)))
; ==> CompilerException java.lang.RuntimeException: Unable to resolve symbol: reader in this context, compiling:(NO_SOURCE_PATH:5)
(use '[clojure.contrib.repl-utils :only (show)])
; ==< nil
(show java.util.Collections "sort")
; ==< ===  public java.util.Collections  ===
; ==< [11] static checkedSortedMap : SortedMap (SortedMap,Class,Class)
; ==< [12] static checkedSortedSet : SortedSet (SortedSet,Class)
; ==< [40] static sort : void (List)
; ==< [41] static sort : void (List,Comparator)
; ==< [47] static synchronizedSortedMap : SortedMap (SortedMap)
; ==< [48] static synchronizedSortedSet : SortedSet (SortedSet)
; ==< [53] static unmodifiableSortedMap : SortedMap (SortedMap)
; ==< [54] static unmodifiableSortedSet : SortedSet (SortedSet)
(slurp "readme.txt")
; ==< 讀出 readme.txt 的內容
(use '[clojure.contrib.duck-streams :only (read-lines)])
; ==< nil
(doseq [line (read-lines "readme.txt")] (println line))
; ==< 印出 readme.txt 的內容
(java.io.File. "readme.txt")
; ==< #>File readme.txt<
(reader (java.io.File. "readme.txt"))
; ==< #>BufferedReader java.io.BufferedReader@42db681c<
(line-seq (reader (java.io.File. "readme.txt")))
; ==< 印出 readme.txt 的內容
(with-open [rdr (java.io.BufferedReader. (java.io.FileReader. "readme.txt"))] (doseq [line (line-seq rdr)] (println line)))
; ==< 印出 readme.txt 的內容
(doc line-seq)
; ==< java.io.BufferedReader 的 lazy-seq!
(def book {:title "1Q84" :author "村上春樹"})
; ==< #'user/book
(assoc book :publisher "新潮社")
; ==< {:publisher "新潮社", :title "1Q84", :author "村上春樹"}
book
; ==< {:title "1Q84", :author "村上春樹"}

Jython, Jyson / simplejson, SQLite

因為公司的開發用 VM 限制重重,前輩說他們覺得最優的方式,就是在自己的目錄下放一堆 JAR ... well, 還好 Python 也做得到。
  • Jython - 直接安裝在自己的目錄下,沒問題。
  • JSON - 使用 Jyson. 他們的首頁壞掉了,可以在 這裡下載 ,或是使用 simplejson
  • SQLite3 - 用 JDBC 沒問題,我用 Xerial 版而不是 Zentus 版。 這裡有範例, 測試過了可以用。
  • HBase - 還沒試,晚一點更新上來
有這堆限制、卻又很不想學 Java ,或許該來看看 Clojure ...

2012-04-11

Ubuntu 11.10 的遠端桌面; JSON for Python 2.4

官網上寫了很多方法,我試過 vino, XDMCP, x11vnc, 最後以 x11vnc 勝出。 直接安裝就好了,按這裡的寫法,如果你已經登錄了,就用 ssh 開一個視窗:
x11vnc -display :0
如果你還沒登錄,一樣用 ssh 開一個視窗:
sudo x11vnc -auth /var/run/lightdm/root/:0 - display :0
建議使用 x11vnc -storepasswd 設定密碼,不然就要記得擋掉 port 5900 的外部存取,然後開 SSH Tunnel 。 客戶端我試用了 remmina, 沒有想像的方便、好用。 新的公司有些文化因素,使得開發人員沒辦法使用比較新的程式語言,安裝模組也會遇到很大的阻力。隨手記一下在 Python 2.4 / 2.6 都能用 JSON 模組的方法: (從 這裡 看到的)
try:
    import json
except ImportError:
    import simplejson as json
補充: 如果沒辦法編譯 simplejson 的 C 加速模組也沒關係,改一下 setup.py 不要讓它 build, 還是可以用單純用 Python 寫的模組。 後記:Python 2.6 的 json 模組實在太慢了... 預設使用 simplejson 比較快。

2012-04-05

SBCL for CentOS 6.2 x64

單純是想在 CentOS 6.2 x86_64 上安裝 SBCL 時遇上了一些問題。 SBCL 下載頁 裡的 AMD64 不能直接用,它需要 /lib64 裡的 GLIBC 2.14,但 CentOS 6.2 附的是 2.12。 解法如下:
  1. 下載 x86 版的 binary ,安裝。這版也可以直接用。
  2. 下載原始碼,編譯。
自己編譯的 AMD64 版在 make test 時會有一個 error (和多緒有關的),不知道會有什麼影響...

2012-03-28

給懂 C++ 的人的 Java 入門

最近因為轉換跑道,需要學 Java ,可是市面上的書大多是從頭教起的。 Java for C++ Programmers 是給已經懂 C++ 和基本的資料結構的人用的線上教學。值得一看!

2011-01-26

WinDbg 的筆記

Scenario 1
dispatch level > APC level > passive level
看到藍幕時,歡迎使用 bug check codes 看看發生什麼事。
!analyze -v
mov edi,edi 原來是每個函式進入點都有的東西,原因「微軟常常有安全更新,所以這邊可以改成 jmp ...」
一定要會的指令: "!analyze -v", dv, dt, r, db, eb, "?? 變數=值", ub, uf, u, k, kp, kP, bl, bc, bp, bu, bm (/1, /t, /p), x, .logopen, .logclose, .reload
vertarget, !process 0 0, lm, !drvobj, !devobj, !devstack, !devnode 0 1, !irpfind, !vm 1, !memusage, .chain, .trap, .cxr, .tss
!vm, !pool, !poolused, !poolvar, !memusage, !poolfind, !pte

Scenario 2
dt nt!_IRP addr
dt nt!_DEVICE_OBJECT addr
dt nt!_EPROCESS addr
!process 0 0
!process -1 0x1E
!thread -1 0xF
!thread ← 推卸責任的好工具 (誤)
.bugcheck
!verifier 3 SIoctl.sys

Scenario 3
kn
.frame 0
dv /V 可以看到 rsp+xx 的偏移量
ub 再 u 看上下文
啊,找到常見的 ptr = 0; *ptr = 1234; 這種錯。

f3cf6bbc f8b9a878 83a3ec00 00000000 00000420 nt!memset+0x41
!verifier 1
!pool 83a3ec00
上面是 memset(0x83a3ec00, 0x00000420);
從 !verifier 1 可以看到分配的 pool 有多大 (0x400)
然後發現給的太少要的太多 (笑)

Scenario 4
kd> !object \Driver
kd> !drvobj usbhub
Driver object (82931a00) is for:
\Driver\usbhub
Driver Extension List: (id , addr)

Device Object list:
82976918 82900c98
kd> !devstack 82976918
!DevObj !DrvObj !DevExt ObjectName
> 82976918 \Driver\usbhub 829769d0 00000063
8282e618 \Driver\usbuhci 8282e6d0 USBPDO-1
!DevNode 82926648 :
DeviceInst is "USB\ROOT_HUB\4&231024c6&0"
ServiceName is "usbhub"
kd> !devnode 82926648
DevNode 0x82926648 for PDO 0x8282e618
Parent 0x82a7aa68 Sibling 0000000000 Child 0000000000
InstancePath is "USB\ROOT_HUB\4&231024c6&0"
ServiceName is "usbhub"
State = DeviceNodeStarted (0x308)
Previous State = DeviceNodeEnumerateCompletion (0x30d)
StateHistory[09] = DeviceNodeEnumerateCompletion (0x30d)
StateHistory[08] = DeviceNodeStarted (0x308)
StateHistory[07] = DeviceNodeEnumerateCompletion (0x30d)
StateHistory[06] = DeviceNodeStarted (0x308)
StateHistory[05] = DeviceNodeStartPostWork (0x307)
StateHistory[04] = DeviceNodeStartCompletion (0x306)
StateHistory[03] = DeviceNodeResourcesAssigned (0x304)
StateHistory[02] = DeviceNodeDriversAdded (0x303)
StateHistory[01] = DeviceNodeInitialized (0x302)
StateHistory[00] = DeviceNodeUninitialized (0x301)
StateHistory[19] = Unknown State (0x0)
StateHistory[18] = Unknown State (0x0)
StateHistory[17] = Unknown State (0x0)
StateHistory[16] = Unknown State (0x0)
StateHistory[15] = Unknown State (0x0)
StateHistory[14] = Unknown State (0x0)
StateHistory[13] = Unknown State (0x0)
StateHistory[12] = Unknown State (0x0)
StateHistory[11] = Unknown State (0x0)
StateHistory[10] = Unknown State (0x0)
Flags (0x00000130) DNF_ENUMERATED, DNF_IDS_QUERIED,
DNF_NO_RESOURCE_REQUIRED
CapabilityFlags (0x00001602) DeviceD2, SurpriseRemovalOK,
WakeFromD0, WakeFromD2
kd> !devnode 82926648 1
DevNode 0x82926648 for PDO 0x8282e618
InstancePath is "USB\ROOT_HUB\4&231024c6&0"
ServiceName is "usbhub"
State = DeviceNodeStarted (0x308)
Previous State = DeviceNodeEnumerateCompletion (0x30d)

2010-08-29

古蘭經 plugin

給 blogger.com 用的 plugin:
1. 選擇設計版面→新增小工具

2. 選 HTML/JavaScript

3. 填進這些值 (請從下面剪貼):


<style type="text/css">
#quran {width: 200px; border: 0px;}
</style>

<div id="quran">
<script src="http://220.133.42.47/quran.php" type="text/javascript" charset="UTF-8"></script>
</div>

4. 儲存,預覽:

5. 最後別忘了存檔哦!

2010-08-18

詞頻列表

昨天寫信給張裕宏老師請安,今天就被 assign 作業了 ... 要生出台灣和大陸的詞頻列表,各22000個詞咧! (撞牆)
趕快來筆記一下:
中研院語言所 現代漢語語料庫詞頻統計
《八十七年口語問卷詞頻資料庫》 ... 區分國小國中高中大學。DBF 格式 (dBase III) 配上倚天中文造字檔! 真懷念。決定不用。
教育部國語詞典簡編本 詞頻表

國語詞典簡編本的統計樣本不知道有哪些。最常用的前十個詞列出來給大家看看: 我們、「台灣」、可以、自己、他們、沒有、因為、可能、如果、問題。
台灣的詞頻排第二名!!! 這個樣本可能完全是報紙、特別是第一疊嚴肅新聞版的! (那「我們」為什麼會在報紙出現呢?)

中研院語言所的沒分單音節詞和多音節... 前十個是: 的、是、一、在、有、個、我、不、了、這。
前12個多音節詞是: 我們、自己、他們、因為、什麼、問題、所以、沒有、台灣、學生、公司、表示、如果 ..
中研院的語料確實以書面為主,所以口語最常用的「因為、所以、沒有、如果、可是、但是」沒排在最前面。
但是「台灣」排第九,還是很令人驚訝! 書面文章裡這麼常提到台灣嗎?

47m 個漢字的 SUBTLEX-CH:中文字頻/詞頻/標注詞頻(PoS)
基于网页的词频统计 基本上是不堪用的。
Lukhnos 提供的 Lancaster Corpus of Mandarin Chinese 詞頻
最重要的: 人民日報的一直找不到!!!

2010-07-23

編譯及執行 Edk2

很多地方都有教學了,只是記在這裡備忘:
1. 抓下 Edk2
2. 修改 edksetup.bat 加上 set CYGWIN_HOME=D:\cygwin
3. set EDK_TOOLS_PATH=D:\edk2\10578\BaseTools
4. edksetup.bat --nt32
5. build
6. build run

2010-04-30

PHC-WIN + WinBinder 的小技巧

最近因為需要在 Windows 下寫一點小工具,於是想起了久久沒用的 RoadSend PHP compiler 。
RoadSend 不錯用,不過最近的版本好像 GTK 支援壞掉了,而且要使用者裝 GTK library, 好像不太友善,於是轉而尋求其他方案...
WinBinder 是套 PHP 的 Win32 API Binder,很好用,速度蠻快的,寫起程式也很直觀,反正都在 Win32 下了,就別想什麼可攜性吧 (笑) ,用用 Win32 API 和 COM 快速解決問題就好。
除了 RoadSend 之外,我找到了 Bambalam Compiler 和 PHC-WIN。
bamcompile (Bambalam Compiler) 一般情況下很好用,對 WinBinder 的支援很好,產生出來的 EXE 檔不大,只支援 PHP4。實際使用時,發現它處理太大的資料時 (我要把一個幾千行的 excel 檔讀進來,排序,輸出) ,會直接當掉。
PHC-WIN 0.3.1 是可用的選擇,優點是支援 PHP5,處理很大的 excel 也很穩定,但缺點是需要把以下檔案連同 EXE 檔包成一塊...
php5ts.dll
php_bcompiler.dll
php_win32std.dll
php_winbinder.dll
php-embed.ini

一下子目錄就多了 5MB, 感覺蠻差的,但至少可以把事情做好...

有個小技巧可以節省空間:抓 Alec Gorge 包好的 DLL 檔,可以省到 3MB,檔案也只要4個:

myprogram.exe
php-embed.ini ← 記得要修改
php5ts.dll ← 這是 Alec Gorge 的
php_bcompiler.dll

記得 php-embed.ini 裡要把其他 DLL 檔拿掉,改成這樣:

[PHP]
extension_dir='./'
extension=php_bcompiler.dll

此外,由於 PHC-WIN 還在開發初期,有一些小技巧可以讓開發更順利... 我可是被它的小 bug 卡住整整一個工作天呢!

技巧1: 砍掉備份檔,只留 .php -- 如 vim 的 *.php~
技巧2: 砍掉 .phb 檔 -- 重編譯不一定會覆蓋! 砍掉比較保險
技巧3: 發佈前先 copy 到別台電腦測試 -- 少掉很多「明明在我這裡跑得動」的對話
技巧4: 移除 PHP 安裝 -- 不要再用 installer 了,免得載入哪一版 DLL 傻傻分不清。
技巧5: 主檔案叫 myprog.phpw 然後把 WinBinder 裝好,節省開發時間。記得用 c:\winbinder\binary\php4\php.exe myprog.phpw 來測試,不然很多錯誤訊息看不到...
技巧6: 和 bamcompile 一樣,但不知道為什麼 PHC-WIN 的手冊沒寫得很清楚。以下是 WinBinder + Excel Reader 的引入檔...

function exe_resource($file)
{
return defined('EMBEDED') ? 'res:///PHP/'.strtoupper(md5($file)) : (getcwd()."/$file");
}
include_once(exe_resource('./wb_windows.inc.php'));
include_once(exe_resource('./wb_generic.inc.php'));
include_once(exe_resource('./wb_resources.inc.php'));
include_once(exe_resource('./oleread.inc.php'));
include_once(exe_resource('./reader.php'));

祝大家開發順利啦!

2010-03-30

不可靠的 compiler

最近連續好幾個被 compiler 陷害的 bug ... 公司內有 MRC Code 用 Visual Studio 2003 的 VC++ compile 出來的東西,加一行減一行就看不到 bug 的問題; CPLD code 重新 compile 後 bug 就不見的問題,我自己做的玩具也被 8051 用的 SDCC 害到。公司的不便多說,先講講 SDCC 害人的情況。

主要是,程式寫好後用模擬器 (S51DEMO) 怎麼跑都OK,但一燒上 AT89S51 就不會動,hang 在 serial_init() 的位置。動用 /* 註解 */ 大法,終於找到問題出在一行 char str[] = {} 宣告:

__code unsigned char str[] = {
0x12, 0x33, 0xf0, 0x33, 0xf0, 0x12, // H
0x24, 0xf0, 0x24, // e
// ...
0x00 } ;

重點在 __code。如果不加的話,SDCC 會把它 compile 成 __DATA 很詭異地賦予初值,然後 AT89S51 就當在這了:

; kbd.c:168: unsigned char str[] = {
mov _main_str_1_1,#0x12
mov (_main_str_1_1 + 0x0001),#0x33
mov (_main_str_1_1 + 0x0002),#0xF0
mov (_main_str_1_1 + 0x0003),#0x33
mov (_main_str_1_1 + 0x0004),#0xF0
; ...
mov (_main_str_1_1 + 0x0024),#0x00
; 誰能告訴我為什麼 8051 執行過這邊就當掉 =.=

加了之後,就會是和其他字串常數一樣正常的 assembly code:

_main_str_1_1:
.db #0x12 ; 18
.db #0x33 ; 51
.db #0xF0 ; 240 ?
.db #0x33 ; 51
.db #0xF0 ; 240 ?
.db #0x12 ; 18
; ...
.db #0x00 ; 0

2008-09-11

[好站]用各種語言實現演算法

Gentoo : Intel® Pentium® 4 Computer Language Benchmarks Game
很有趣,OCaml 其實還蠻快的,Python/PHP/Ruby 自然慢得不得了,Scheme 竟然很慢(怪!) 但 LISP SBCL 非常快!
有兩個語言出乎意料:
Isaac
Smart Eiffel
該找時間研究一下...

2008-09-06

DOS下使用flat mode的好工具 -- Watcom C

部門的專案要在 DOS 下存取 ACPI Table。依據 ACPI Specification 3.0b,ACPI Table 首先是在 F000:0000-FFFF 段中放一段 RSDP,由 "RSD PTR " 標示 RSDP 進入點,從那找到 XSDT (32位元位址,通常在 0x7Fxx_xxxx) 後,再查到 FADT 及 DSDT 。由於 XSDT, FADT, DSDT 都在32位元位址,偷懶的我自然想找些 DOS Extender 來處理,不想自己切進保護模式。
我首先想到的是 djgpp 。一直以來 djgpp 用得十分順手,像這樣:

char x = _farpeekb(_dos_ds, 0xFFFFFFE4); 或是
movedata(_dos_ds, base, _my_ds(), (unsigned)buf, len);

可是,不知道為什麼,只要存取到 0x7F 位址,SIGSEGV 馬上就跑出來,查了 ds selector 的範圍,一切都 OK ,但程式就是動不了。
爬文爬了很久,有人用 Borland C++ 編出來的程式能動,但我不想裝 Borland C++. 靈機一動,想起 DOS4GW ,上網一找果然 Watcom C 已經釋出成為免費軟體了,改名叫 Open Watcom。

照著範例寫一寫,32-bit flat mode 真的很棒,像這樣:

char *ptr = (char *)0x000FFFEA;
char x = ptr[0];

這樣就可以存取了耶,讚!因為這樣我就可以

for(i = 0; i < len; i++) buf[i] = ptr[i];

了,簡捷易懂,而且以 Watcom C 的強大最佳化能力,應該不會和 djgpp 的 movedate() 差多少。

Watcom 的編譯是另一個問題。DOS 下編譯器的開關百百種,Makefile 也是各家不同。Turbo C 和 GNU Make 很不同,Watcom 也有自己的 wmake 格式。此外,32-bit flat mode 可以選的 DOS extender 非常多種,但同樣的 ACPI 程式,用 CauseWay 一樣會 SIGSEGV,但用 DOS4GW 和 PMODE/W 卻非常 OK。幸好,Open Watcom 附上了一個 IDE, 可以幫忙設定幾個旗標,再配上 sample 目錄下的 makefile, 很快就可以做出自己想要的效果了。
Watcom 的 makefile 長這樣:

LNKOPT = option quiet system pmodew
exes = oemid.exe pmbase.exe
all : $(exes) .SYMBOLIC
@%null
oemid.exe : oemid.obj
wlink $(LNKOPT) name oemid file oemid
.c.obj :
$(CC) $^& $(CFLAGS)

天啊! 什麼鬼... 還好有 sample 可以參考。把 LNKOPT 的 pmodew 換成 dos4g, 就可以做成用 DOS4GW 的執行檔了。

選用哪個 extender 也得比較比較。djgpp 預設使用 CSDPMI,沒事帶著幾個 DPMI run-time 挺煩人的。DOS4GW 一叢大大 200 多 K, 一樣讓人心情不佳。DOS/32A 很棒,但 PMODE/W 更棒更小,整個程式做完只要 30K ,不需外掛 run-time. 使用 extender 省下的切進切出保護模式的時間,也實在是讓人夠開心了。

最後講一些 djgpp 和 Watcom 的差異。這困擾了我幾個小時...
makefile 不同是小事,反正我都寫些小工具,大不了寫批次檔。差異都是些討厭的地方,像..

djgpp:

asm { "cli" }
outportl(0xcf8, i & ~3);
x = inportl(0xcfc);
asm { "sti" }

movedata(_dos_ds, RSDP+24, _my_ds(), XSDT, 4); /* 32位元位置 = 4 bytes */

Watcom:

__asm { "cli" }
outpd(0xcf8, i & ~3);
x = inpd(0xcfc);
__asm { "sti" }

#define PTRPTR(x) (char *) *(char **)(x)
XSDT = PTRPTR(RSDP+24); /* 存取指標的指標 */

這點比較起來,Watcom 的似乎比較 ANSI 一點呢! 可是啊,我真是太~~愛 djgpp 的 AT&T 式組語了。真好用。這下要切回 MASM 相容模式,還需要一點點適應的時間...

2008-08-22

DOS 下使用 NetBIOS

有經過 DOS 時代的人應該不陌生,所以只是寫在這裡留個紀錄。程式不知道還受不受版權保護,所以先不放上來...
config.sys:
DEVICEHIGH=\NET\PROTMAN.DOS /i:\NET
DEVICEHIGH=\NET\B57.dos
DEVICEHIGH=\NET\NTSTS.DOS
DEVICEHIGH=\NET\DLSHELP.SYS
DEVICEHIGH=\NET\DIS_PKT.DOS

autoexec.bat:
NETBIND.COM
SET TCPHELP=A:\NET
SET ETCDIR=A:\NET
set wattcp=a:\net\wattcp.cfg
\NET\NET START /YES /COMPUTERNAME:*
\NET\NET.EXE USE X: \\server\dir

2008-08-14

在 Aspire One Linux 安裝 VirtualBox

即使 Linux 桌面已經很好用了,還是難免有需要用到 IE 、網路銀行、電子下單等等功能的時候,所以安裝一套 VirtualBox 再裝個 Windows XP 或 2000 應該是再好不過的選擇了。恰好,宏碁今天早上釋出了 Aspire One Linux 用的 2.6.23.9lw 的 kernel source ,我們正好拿來試試。
先說個題外話。他們剛釋出原始碼不久,我就接到宏碁請託本公司某部門的人來電關切,說大家可以認識認識,有什麼需求當面比較容易談清楚。不過既然原始碼都放出來,也就不用見面了,廠商客戶雙贏,挺好的。

安裝有一些要點: (1)需要 vboxdrv.ko (2)要把 user 加進 vboxusers 群組 (3)之前關掉 swap 的人記得先暫時加回去。以下分項說明。

先去下載VirtualBox,選擇 Fedora 8 (i386) 版,進 terminal 中 rpm -ivh VirtualBox-1.6.4_33808_fedora8-1.rpm 。這時候一定會看到無法編譯 kernel module 的訊息。沒關係,我們下一步就要處理。

編譯 vboxdrv.ko
先講正規的做法。首先,去 Aspire One 的FTP站下載核心原始碼。建議下載到裝在桌機的 Linux 再編譯...
由於他們使用 zip 壓縮,symbole link 被還原了,所以其中有一個目錄得先砍掉,否則不能編譯。假設你下載到另一台 Linux 上的 /usr/src ,解開來,然後輸入以下命令:

# unzip ~/Aspire_One_Linpus_Linux/Aspire_One_Source/linux-2.6.23.9lw.zip
# cd linux-2.6.23.9/
# cp ../config_080627 .config
# cd include
# rm -fr asm
# cd ..
# make oldconfig
# make bzImage modules

編譯完後,把整個目錄 tar 起來 copy 到 Aspire One 上面,或是 rsync 一下... 然後,為了編譯 vboxdrv 需要再安裝一些套件:
yum install make gcc

最後執行
/etc/init.d/vboxdrv setup
就解決了。
我知道這些步驟對一般 user 來說不容易,所以準備好編譯完的檔案,請下載後,輸入
tar zfx vboxdrv.tgz -C /
就裝好 vboxdrv.ko 了。

修改執行環境
打開編輯器,修改 /etc/group ,找到下面這行,然後加上 user:
vboxusers:x:502:user
需要重新開機。

安裝 Guest OS
安裝前,記得進 terminal ,掛進剛剛做好的 module 。如果你按照前幾篇關掉了 swap,這時候最好先加回來... 建議! 如果你在桌機上裝好再 copy vdi 檔過來,就不用加 swap 了。

su -
/etc/init.d/vboxdrv start
/etc/init.d/vboxnet start
# 要加 swap 的話請打下面 4 行. 這樣才不會傷害脆弱的 SSD? (誤)
cd /media/disk
dd if=/dev/zero of=swap.1 bs=1k count=1024k
mkswap swap.1
swapon swap.1

然後在桌面上按右鍵選「系統→Sun xVM VirtualBox」,用 user 的權限開進去。
建議先在桌機上安裝,安裝好後再把 .vdi copy 進來。安裝需要一點時間...

有圖有真相:


切 Virtual Disk 的時候記得指定 /media/disk/xp.vdi ,不然它還是會寫進 SSD 裡。


快照資料夾順便改一下:


要從網路芳鄰 share CD-ROM 再安裝雖然可以,但還是比較建議先在桌機裝好再說:


如果出現這個畫面,表示你忘了 /etc/init.d/vboxdrv start:


裝吧裝吧~~


繼續努力~~


開起來了! 耶~


補充說明
如果要外掛 USB 硬碟,或許你需要 ntfs 驅動程式... 試試
yum install ntfs-3g

如果你在桌機安裝,建議先把 Storage Expansion 裡的 SD 卡拿到桌機再 copy vdi 檔,不然你會覺得 Aspire One 好像當掉一樣,但事實上... 我也不確定當了沒。在桌機 copy 一整個 4GB 的 vdi 檔到 SD 卡,約需要 13 分鐘。

賀! 宏碁釋出 kernel 原始碼

需要的人請到 ftp://Guest@csdftp.acer.com.tw/ 下載。
晚一點來把它 compile 起來... 然後把 VirtualBox 包一包吧~~:D

2008-08-08

調校你的 Aspire One (Linux) #8 - 雙螢幕顯示

因為有 xrandr 的關係,雙螢幕顯示再容易不過了。Aspire One 上的雙螢幕顯示出處在此,我只是翻譯整理一下。
以下設定要改動 /etc/X11/xorg.conf ,請小心使用,以免開不了機。真的改壞了,用任何一張 Linux LiveCD 開起來再改回來就好。

接投影機一般是 1024x768, 接 19" 液晶螢幕一般是 1280x1024, 把掃瞄頻率定在 60Hz. 修改 xorg.conf, 把倒數第 3 行的 Virtual 1024 600 改成 Virtual 2304 1024。
上面幾行有一個 Modeline "1024x600", 在那下面加上

Modeline "1024x768" 64.11 1024 1080 1184 1344 768 769 772 795 -HSync +Vsync
Modeline "1280x1024" 108.88 1280 1360 1496 1712 1024 1025 1028 1060 -HSync +Vsync

如果覺得麻煩,請到這裡下載我的 xorg.conf

雖然 Aspire One 手上冊說外接螢幕前必須重開機,可是實驗發現,可以不用重新開機,直接使用下列命令:

xrandr --output VGA --right-of LVDS --mode 1280x1024

把 1280x1024 改成 1024x768 就適用於投影機了。
VGA 指的是外接螢幕,LVDS 指的就是筆電上的 LCD。如果要回到原來的單螢幕,只要下:

xrandr --output VGA --off

更多 xrandr 的使用方法請看這裡。
這兩行 Modeline 的產生方法是從這裡看來的,使用以下命令:
gtf 1024 768 60 # 60Hz

Aspire One 不支援 --rorate 命令,算是美中不足之處。