快速了解什麼是知識圖譜, 如何以Neo4j圖形資料庫實作知識 ...

Understand What is Knowledge Graph and how to implement it by Neo4j. 什麼是知識圖譜. 簡單的說就是透過給定的關係, 把不同種類的資料給連結在 ... 跳到主要內容 快速了解什麼是知識圖譜,如何以Neo4j圖形資料庫實作知識圖譜(knowledgegraph) 5月19,2019 UnderstandWhatisKnowledgeGraphandhowtoimplementitbyNeo4j 什麼是知識圖譜 簡單的說就是透過給定的關係,把不同種類的資料給連結在一起而得出的關係網路,最後我們可以藉由查詢關係的方式來獲取更深一層的答案 目前已知的知識圖譜有Freebase,DBpedia,以及Bio2RDF(如果有興趣的話可以去Google一下,這邊就暫不作介紹) 那我們要如何實現知識圖譜? 要實現知識圖譜並不難,首先要定義資料的關係,再來就是要有個圖形資料庫來儲存資料以及關係 在接下來的篇幅裡會介紹如何使用Neo4j圖形資料庫來實作知識圖譜 為什麼要用知識圖譜與圖形資料庫 對於小型且關係不怎麼複雜的資料來說,其時RDB就很夠用了,但是當資料越長越大,而且關係越來越複雜時,RDB就很難去處理這種情況 而圖形資料庫就是為了解決這問題存在的,省去了用RDB時需要的反覆JOIN 但圖形資料庫也不是萬能的,比如說,他不適合大量的及時儲存,他只適合讀取 一般而言,資料庫可以大約分成三個特性CAP來討論 因為物理限制,所以通常資料庫只能滿足其中兩項,而另一項就可能被犧牲掉 CAP CAP=Consistency+Availability+Partitiontolerance 一致性(Consistency) 拿資料的時候可以保證資料一致,無論用戶端怎麼讀取，都要能夠正確讀取最新的資料 可用性(Availability) 快速回應能力 分割容忍(Partitiontolerance) 這個能力關係到資料庫好不好以及容不容易擴展 圖形資料庫Neo4j基本概念 資料庫的結構 每筆資料在知識圖譜裡都表示成一個節點Node, 每個節點裡面可以自帶一些屬性Property(比如說年齡,性別,工作),而我們也可以在節點上黏上數個標籤Label來表示資料的類別,當我們在查詢資料時就可以用Label來過濾資料而更精準地獲得答案, 除此之外節點與節點之間可以建立有向關係,關係中也可以自帶屬性 如人:安海瑟威----(演過{收入:$1M})--->電影:黑暗騎士  安海瑟威演出過黑暗騎士這部電影,這個演出的關係中安海瑟威的片酬是$1M 簡單的說就是, 我們可以建立節點並給予標籤,並且在節點間建立關係,而每個節點又可以建立屬性來表達更詳細的資料特性 基本語法 建立資料CREATE 這個範例就是建立四筆資料節點,兩筆節點的標籤是Product,一筆節點的標籤是Category,而另一筆則是Supplier 查詢資料MATCHRETURN MATCH就有點像SQL中的FROM語法,決定要從資料庫的哪裡去撈資料 RETURN就像SELECT語法可以決定要撈出那些屬性 比如: 若要把Product這個標籤底下的所有節點的name給撈出來,查詢語法可以這樣寫 MATCH(x:Product) RETURNx.name 建立關係 在Product跟Category之間建立一個PartOf的關係 建立Supplier與Product的關係也是如法炮製 MATCH(x:Product) MATCH(y:Supplier) CREATE(y)-[:] 最後下MATCHRETURN語法把結果印出來就是長這樣 當然實務上也可以透過更簡短的指令把剛剛的節點以及關係建好 CREATE(s:Supplier{name:'LG'})-[:Supply]->(x:Product{name:'Mobile'})-[:PartOf]->(y:Category{name:'3C'}) CREATE(s)-[:Supply]->(x2:Product{name:'TV'})-[:PartOf]->(y) RETURNx,x2,y,s WHERE 這個語法很直覺就是在WHERE指定一些條件式來過濾資料 總結 雖然圖形資料庫以更簡單且直覺的方式來儲存和表示資料,但也有幾個缺點1.無法並行運算2.無法有效率的顯示即時資料結構3.應付大量更新會很吃力 所以在採用圖形資料庫之前必須好好的評估一下對於專案的利弊,而不是盲目的導入這個技術 分享 取得連結 Facebook Twitter Pinterest 以電子郵件傳送 其他應用程式 標籤 Database graphdatabase knowledgegraph neo4j 標籤： Database graphdatabase knowledgegraph neo4j 分享 取得連結 Facebook Twitter Pinterest 以電子郵件傳送 其他應用程式 留言 這個網誌中的熱門文章 [解決方法]docker:permissiondenied 2月20,2019 前言當我們執行docker指令時若出現以下錯誤訊息docker:GotpermissiondeniedwhiletryingtoconnecttotheDockerdaemonsocketatunix:///var/run/docker.sock:Posthttp://%2Fvar%2Frun%2Fdocker.sock/v1.26/containers/create:dialunix/var/run/docker.sock:connect:permissiondenied.See'dockerrun--help'.表示目前的使用者身分沒有權限去存取dockerengine,因為docker的服務基本上都是以root的身分在執行的,所以在指令前加sudo就能成功執行指令但每次實行docker指令(就連dockerps)都還要加sudo實在有點麻煩,正確的解法是我們可以把目前使用者加到docker群組裡面,當dockerservice起來時,會以這個群組的成員來初始化相關服務sudogroupadddockersudousermod-aGdocker$USER需要退出重新登錄後才會生效Workaround因為問題是出在權限不足,如果以上方法都不管用的話,可以手動修改權限來解決這個問題sudochmod777/var/run/docker.sockhttps://docs.docker.com/install/linux/linux-postinstall/ 分享 取得連結 Facebook Twitter Pinterest 以電子郵件傳送 其他應用程式 張貼留言 閱讀完整內容 [解決方法]NVIDIA-SMIhasfailedbecauseitcouldn'tcommunicatewiththeNVIDIAdriver. 1月30,2019 前言當我們安裝完nvidia的driver後,理論上使用nvidia-smi應該要看到GPU的使用狀況如下但如果是看到以下這個錯誤訊息,表示NVidia的driver沒有成功裝起來NVIDIA-SMIhasfailedbecauseitcouldn'tcommunicatewiththeNVIDIAdriver.MakesurethatthelatestNVIDIAdriverisinstalledandrunning網路上的解法很多 1.確認是否有插入顯卡$lspci|grep'VGA'如果系統有找到卡的話,會顯示顯卡資訊 2.確認securityboot是否為disable的狀態  >開機時,進入Bios設定畫面(若是Acer的電腦,按Del或是F2即可進入Bios) > 改成disable後,重開機再試看看 > 如果以上都不行,那就只能試試大絕招了:更新系統內核(kernel) 3.確認kernel版本是否大於4.10$uname-a結果如下,目前內核版本是4.15若版本小於4.10,那就必須升級方法一:下載內核然後安裝wgethttp://kernel.ubuntu.com/~kernel-ppa/mainline/v4.15.7/linux-headers-4.15.7-041507_4.15.7-041507.201802280530_all.debwgethttp://kernel.ubuntu.com/~kernel-ppa/mainline/v4.15.7/linux-headers-4.15.7-041507-generic_4.15.7-041507.201802280530_amd64.debwgethttp://kernel.ubuntu.com/~kernel-ppa/mainline/v4.15.7/linux-image-4.15.7-041507-generic_4.15.7-041507.201802280530_a 分享 取得連結 Facebook Twitter Pinterest 以電子郵件傳送 其他應用程式 5則留言 閱讀完整內容 [C#]VisualStudio,如何在10分鐘內快速更改命名專案名稱 10月22,2017 前言:由於工作需要,而且懶得再重寫類似的專案,所以常常將之前寫的專案複製一份加料後,再重新命名編譯假設今天我有一個專案HolyUWP,我想把它重新命名成BestUWP時該怎麼做?以下是幾個簡單的的步驟使用VisualStudio2017備份原來專案更改Solution名稱更改Assemblyname,Defaultnamespce更改每支程式碼的Namespace更改專案資料夾名稱備份原來專案由於怕改壞掉,所以在改之前先備份更改Solution名稱更改sln的名稱,這邊我改成BestUWP.sln使用VisualStudio打開你的.sln,右鍵點擊Solution後選擇Rename,這邊我把它重新命名成BestUWP(跟檔案名稱一致)必要的話可以順便修改Porject名稱更改Assemblyname,Defaultnamespce進入Project>OOXXProperties  修改AssemblyName,Defaultnamesapce更改每支程式碼的Namespace基本上隨便挑一支有用到預設Namesapce(HolyUWP)的程式碼來改就好了重新命名後點擊Apply, 這個動作做完後所有用到舊Namespace的程式碼都會被改成新的更改專案資料夾名稱以上動作做完後,基本上就可以把專案編譯出來測看看了~ 分享 取得連結 Facebook Twitter Pinterest 以電子郵件傳送 其他應用程式 1則留言 閱讀完整內容 關於我自己 黑皮考町 瀏覽簡介 封存 2021 8 十月 2 二月 6 2020 29 十一月 1 六月 1 五月 9 四月 7 三月 5 二月 5 一月 1 2019 53 十二月 6 十一月 4 十月 4 九月 1 八月 2 七月 13 六月 8 五月 2 無法連上SQLServer(youclientipaddressdoesnothav... 快速了解什麼是知識圖譜,如何以Neo4j圖形資料庫實作知識圖譜(knowledgegraph) 四月 3 三月 5 二月 1 一月 4 2018 54 十二月 6 十一月 2 十月 6 九月 4 八月 8 七月 6 六月 3 四月 6 三月 11 二月 1 一月 1 2017 89 十二月 6 十一月 8 十月 7 九月 7 八月 16 七月 9 六月 10 五月 14 四月 5 三月 1 二月 3 一月 3 2016 21 十二月 4 十一月 2 十月 1 六月 6 四月 4 三月 4 顯示更多 顯示較少 標籤 .NetFramework alexa amazon Anaconda Animation ApacheBeam api-gateway AppService ask-cli asp auto-scaling-group avs aws AWSIoT AWSLAMBDA AWSSES AWSSNS AWSSQS aws-cli Azure AzureAppService AzureDevOps AzureFunction AzurePipeline AzureServiceBusQueue AzureServiceDomain AzureSQL AzureStorageQueue azure-cli backgroundservice Bash Batch BI bigdata BigQuery Bootstrap BotFramework burpsuit C# C++ cache chatbot CI CICD Cloud CloudBuild CloudDataflow CloudFunction CloudIAM CloudRun CloudScheduler cloud-formation codefirst CognitiveService collection command commit configuration container Cortana CronJob css CUDA curl Database datetime deeplearning deploy DesignPattern DevOps DialogFlow DNS docker DotNetMVC dynamodb EBS elasticbeanstalk ElasticSearch EntityFramework error ETL file flask fontawesome FormFlow frontend FTP GAE GCP gcs git gitlab goland golang googleapi GPU graphdatabase grr Heroku HTML http https hyper-v IAM iis IoT javascript json JupyterNotebook k8s knowledgegraph kvm lambda line LINQ LINQPad linux list load-balancer LocalDb LUIS LWA mac MFC migration ML mongodb MSGraphApi MSSQL mvc MVC.RazorView mvvm MySQL neo4j NER network Nginx NLP NLU Node node.js nodejs NoSQL npm NuGet nvidia Oauth1.0 Oauth2.0 OneDrive oop pip pointer postman powershell Python QnAMakerService Rasa RasaCore Razor React reflect remote Repository rest-api S3 security Serverless sns SQL ssl SSML SSMS string tensorflow test TF2.0 thread troubleshooting tutorial ubuntu UI unittest UWP visualstudio visualstudiocode vm VoiceCommand volume vscode vue.js web webapi WIN32 window Windows WINPE WIX WPF WSGI XSS 顯示更多 顯示較少 檢舉濫用情形