hugegraph資料匯入

2021-10-07 12:17:47 字數 636 閱讀 6887

hugegraph-loader

使用hugegraph-loader 來進行資料+schema的批量匯入, 那這時候我假定整個db都是空的, 包括schema和資料我們都用匯入工具去匯入/修改 ,那顯然至少得準備:

1.圖模型schema檔案 (groovy)

2.點 & 邊的資料檔案 (csv/text/json , 建議按不同點/邊分資料夾放置)

3.schema和資料的對映檔案 [也就是(1)和(2)的對映] (json)

這裡說一下批量匯入的時候, 實際生產上各引數的配置和相關問題

#合理麼? 需要修改多執行緒麼? 為什麼修改batch_size會卡主或特別慢?

bin/hugegraph-loader -g hugegraph -s /path/to/schema.groovy -f /path/to/struct_pdns.json --max-parse-errors0000 -h serverip --retry-interval 3 --retry-times 1 --timeout 5

未完待續。。。。。。。

Hugegraph配置文件

hugegraph開發文件 修改gremlin server.yaml新增 hugegraph conf gremlin server.yaml graphs 修改rest server.propertiesgraphs hugegraph conf hugegraph.properties,hug...

Hugegraph合集 二 概述

快取設計 hugegraph系列文章彙總 圖操作後端 csv資料格式 json資料格式 hdfs檔案或目錄 本地磁碟的全部要求適用 關係型資料庫 不允許關聯查詢 讀到表的某行後 發現某列的值不能直接用 比如外濺 需要再做一次查詢才能確定該列的真實值 分布式儲存 資料多副本及橫向擴容 內建多種後端儲存...

Hugegraph合集 三 安裝部署

10.255.175.41節點 安裝步驟 見官網目錄 核心等在 usr local hugegraph 啟動首次啟動 第一次啟動前需要初始化後端資料庫 非首次啟動 自動連線後端儲存 檢測後端儲存版本號 啟動常見報錯 解決 配置外部訪問hugegraphserver vi conf rest serv...