• Ranger使用solrCloud存储审计日志

    Ranger使用solrCloud存储审计日志

    标签(空格分隔): Ranger


    1, Zookeeper 搭建

    1,忽略。默认已经搭建好zk 集群。
    VECS17820:2181,VECS17821:2181,VECS17822:2181

    2,SolrCloud模式安装(三台机器)

    1,JDK,环境变量及 solr 用户默认已经建立,且安装包 及 log 等等目录均已赋权。

    安装Solr 集群步骤:

    1

    [email protected]:/app$ ll
    total 412840
    lrwxrwxrwx  1 root      root             12 Oct 15 14:19 jdk -> jdk1.8.0_181
    drwxr-xr-x  7        10       143      4096 Jul  7  2018 jdk1.8.0_181
    drwxr-xr-x  9 root      root           4096 Oct 16 17:16 ranger-2.0.0-admin
    -rw-r--r--  1 root      root      250254688 Oct 17 11:05 ranger-2.0.0-admin.tar.gz
    lrwxrwxrwx  1 solr      solr             10 Oct 15 17:18 solr -> solr-7.7.2
    drwxr-xr-x  9 solr      solr           4096 May 28 23:38 solr-7.7.2
    -rw-r--r--  1 solr      solr      172470530 Oct 15 17:14 solr-7.7.2.zip
    lrwxrwxrwx  1 zookeeper zookeeper        16 Oct 15 14:22 zookeeper -> zookeeper-3.4.10
    drwxr-xr-x 10 zookeeper zookeeper      4096 Mar 23  2017 zookeeper-3.4.10

    其中solr 集群机器上的ranger 安装包为临时需要copy,并不是ranger-admin 节点。(后续会用到这个包的conf 目录)

    2

    修改每台机器的solr配置文件solr.in.sh

    SOLR_JAVA_MEM="-Xmx20g -Xms20g -Xmn5g  -Xss256k -XX:MaxPermSize=384m -XX:SurvivorRatio=6 -XX:+UseParNewGC  -XX:ParallelGCThreads=10 -XX:+UseConcMarkSweepGC -XX:ParallelCMSThreads=16 -XX:+CMSParallelRemarkEnabled -XX:+UseCMSCompactAtFullC
    ollection -XX:+UseCMSInitiatingOccupancyOnly -XX:CMSInitiatingOccupancyFraction=70 -XX:CMSMaxAbortablePrecleanTime=500 -XX:CMSFullGCsBeforeCompaction=5 -XX:+CMSClassUnloadingEnabled -XX:+HeapDumpOnOutOfMemoryError -verbose:gc -XX:+PrintG
    CDateStamps -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -Xloggc:/app/solr/bin/gc-solr-`hostname`.log"
    
    
    ZK_HOST="VECS17820:2181,VECS17821:2181,VECS17822:2181/ranger_audits"

    3

    在其中一台solr 集群节点上执行如下命令,用以在zookeeper上创建ranger_audits的chroot目录,该目录只需要创建一次

    sudo su 
    cd /app/solr-7.7.2
    server/scripts/cloud-scripts/zkcli.sh -zkhost VECS17820:2181,VECS17821:2181,VECS17822:2181 -cmd makepath /ranger_audits

    4启动三台solr集群节点(每台都执行)

    sudo su - solr
    cd /app/solr-7.7.2/bin
    ./solr start -c

    5 创建名为ranger_audits的连接

    注:手动解压安装包搭建solr集群模式,必须使用ranger中的solr配置项创建连接

    cd /app/solr-7.7.2
    
    bin/solr create_collection -c ranger_audits -d /app/ranger-2.0.0-admin/contrib/solr_for_audit_setup/conf -shards 3 -replicationFactor 2
    上面命令执行时,会自动把默认配置集下的 conf 目录上传到zookeeper中并关联到默认的collection中。

    3、Ranger-Admin配置

    vim /app/ranger-2.0.0-admin/install.properties

    #Source for Audit Store. Currently only solr is supported.
    # * audit_store is solr
    audit_store=solr
    
    # * audit_solr_url URL to Solr. E.g. http://<solr_host>:6083/solr/ranger_audits
    audit_solr_urls=http://VECS07820:8983/solr/ranger_audits 
    audit_solr_user=
    audit_solr_password=
    audit_solr_zookeepers=VECS17820:2181,VECS17821:2181,VECS17822:2181/ranger_audits
    
    audit_solr_collection_name=ranger_audits
    #solr Properties for cloud mode
    audit_solr_config_name=ranger_audits
    audit_solr_no_shards=3
    audit_solr_no_replica=2
    audit_solr_max_shards_per_node=1
    audit_solr_acl_user_list_sasl=solr,infra-solr

    在setup.sh 之后
    /app/ranger/ews/webapp/WEB-INF/classes/conf/ranger-admin-site.xml
    配置文件中将会加载 install.perproties 中的配置项。

    、Ranger-Hbase-Plugin为例配置

    vi ranger-2.0.0-hdfs-plugin/install.properties

    XAAUDIT.SOLR.ENABLE=true

    XAAUDIT.SOLR.ZOOKEEPER=VECS17820:2181,VECS17821:2181,VECS17822:2181/ranger_audits

    相关文章
    相关标签/搜索
    香港马会资枓大全2019天空彩彯天下彩天空彩票与你同行2019今晚开码结果开奖现场历史开奖资料记录在线查询 桐乡市| 堆龙德庆县| 宜兰市| 旺苍县| 吴江市| 中方县| 永新县| 盐亭县| 买车| 杂多县| 绥芬河市| 麻栗坡县| 行唐县| 仲巴县| 镇远县| 蒙山县| 夏邑县| 宜兰市| 胶州市| 沙雅县| 阿城市| 富顺县| 柳江县| 潼关县| 黎平县| 岑溪市| 渭南市| 绥江县| 冷水江市| 贵定县| 扎赉特旗| 静宁县| 吉安县| 左贡县| 常熟市| 兴山县| 普定县| 大化| 额尔古纳市| 永新县| 广德县| 呼图壁县| 宁河县| 共和县| 汨罗市| 通城县| 天津市| 湘阴县| 麦盖提县| 鄄城县| 靖西县| 施甸县| 页游| 西丰县| 卢湾区| 彩票| 施甸县| 休宁县| 乌兰浩特市| 明水县| 四子王旗| 阿瓦提县| 清涧县| 滦南县| 集贤县| 错那县| 德江县| 团风县| 长葛市| 南阳市| 石台县| 同江市| 渭源县| 湛江市| 涿州市| 息烽县| 南澳县| 清原| 泗阳县| 修武县| 大荔县| 兴城市| 界首市| 敖汉旗| 孝昌县| 凤阳县| 乡宁县| 丰宁| 虎林市| 东莞市| 瓦房店市| 绥化市| 潍坊市| 色达县| 社会| 枝江市| 五华县| 新河县| 萍乡市| 嘉定区| 环江| 奉新县| 商都县| 新营市| 北川| 龙里县| 通化市| 登封市| 昂仁县| 灯塔市| 崇阳县| 赫章县| 施秉县| 苗栗市| 始兴县| 瑞昌市| 封丘县| 奉贤区| 昆明市| 辽源市| 咸阳市| 兰溪市| 托克逊县| 宝鸡市| 新干县| 雅江县| 长子县| 张北县| 泉州市| 黔西| 吉安县| 调兵山市| 老河口市| 水城县| 富裕县| 晋州市| 开平市| 盘锦市| 乐业县| 囊谦县| 云林县| 光山县| 永城市| 丹棱县| 罗山县| 芦溪县| 齐齐哈尔市| 宜黄县| 余江县| 南皮县| 贡觉县| 雅江县| 珲春市| 山丹县| 德格县| 金阳县| 河津市| 仙游县| 县级市| 梁平县| 九龙县| 会同县| 灵山县| 巢湖市| 新巴尔虎左旗| 弥勒县| 梅州市| 灵璧县| 裕民县| 长乐市| 湘阴县| 仙桃市| 泸水县| 葵青区| 南投县| 宝鸡市| 高阳县| 吐鲁番市| 井研县| 文成县| 昌江| 大港区| 新宁县| 扎赉特旗| 宿松县| 措勤县| 七台河市| 辽宁省| 阿拉善右旗| 连江县| 祁阳县| 甘泉县| 兴隆县| 苗栗县| 尼勒克县| 福安市| 太谷县| 广东省| 瑞安市| 麦盖提县| 五寨县| 利津县| 淮北市| 东莞市| 那坡县| 临泽县| 乌鲁木齐市| 新干县| 烟台市| 郧西县| 锦州市| 西乌珠穆沁旗| 新营市| 获嘉县| 石景山区| 新民市| 乐安县| 柘城县| 台北市| 惠安县| 赣州市| 涟源市| 太康县| 淮南市| 新邵县| 珠海市| 大英县| 勐海县| 湖北省| 武乡县| 乌兰县| 那坡县| 肥西县| 腾冲县| 通州市| 枝江市| 钟山县| 康乐县| 健康| 汝城县| 萨迦县| 宁南县| 洪湖市| 滨海县| 板桥市| 昌平区| 宜君县| 延津县| 新干县| 海淀区| 嘉祥县| 古浪县| 廊坊市| 太康县| 安多县| 舟曲县| 洛隆县| 天气| 延寿县| 顺昌县| 介休市| 民勤县| 施秉县| 宁远县| 屯留县| 綦江县| 湘西| 安塞县| 云霄县| 临沧市| 南开区| 扬中市| 新巴尔虎左旗| 新丰县| 横山县| 罗甸县| 德昌县| 东至县| 方山县| 合水县| 旌德县| 报价| 土默特右旗| 大城县| 金阳县| 安宁市| 玛沁县| 介休市| 金门县| 莒南县| 邳州市| 唐山市| 榆中县| 景泰县| 自治县| 新龙县| 宜春市| 伊金霍洛旗| 法库县| 綦江县| 嵊泗县| 资阳市| 吕梁市| 额尔古纳市| 峨眉山市| 南充市| 惠来县| 屏南县| 抚顺市| 南和县| 吉木乃县| 江西省| 大宁县| 北碚区| 嘉善县| 腾冲县| 临安市| 班戈县| 友谊县| 成武县| 修文县| 泾源县| 山阳县| 红河县| 酒泉市| 格尔木市| 营山县| 渝中区| 株洲县| 宁晋县| 理塘县| 白山市| 陆河县| 沁阳市| 长武县| 博客| 攀枝花市| 乌恰县| 泰顺县| 牡丹江市| 南乐县| 南通市| 呼伦贝尔市| 太仓市| 白城市| 两当县| 永州市| 大连市| 资中县| 潞城市| 巴青县| 中阳县| 宿松县| 浦城县| 巢湖市| 灯塔市| 吉林市| 额尔古纳市| 公安县| 丰城市| 曲沃县| 商洛市| 沈丘县| 涞水县| 鄱阳县| 宾川县| 清徐县| 巴东县| 景洪市| 大英县| 定日县| 西青区| 定西市| 峨山| 泸溪县| 芜湖县| 颍上县| 井陉县| 阳原县| 东源县| 乡宁县| 江安县| 芮城县| 阳朔县| 五峰| 延安市| 离岛区| 新竹县| 丰原市| 木兰县| 龙泉市| 榆树市| 托里县| 云浮市| 株洲市| 新民市| 潮安县| 兴隆县| 雷山县| 绥中县| 措美县| 吴忠市| 景谷| 聂拉木县| 贵港市| 吉首市| 齐河县| 岳西县| 盖州市| 靖边县| 南乐县| 阿克| 集贤县| 阿拉尔市| 苏尼特右旗| 东兴市| 黎平县| 东乌珠穆沁旗| 内江市| 祁连县| 平谷区| 离岛区| 葵青区| 沙雅县| 汉中市| 区。| 邵东县| 嘉荫县| 尼勒克县| 抚松县| 惠州市| 深泽县| 重庆市| 尼木县| 定兴县| 泌阳县| 彭州市| 岗巴县| 陵水| 丹棱县| 正阳县| 周宁县| 仙居县| 巴林右旗| 汉源县| 将乐县| 霍林郭勒市| 新源县| 铁岭市| 营山县| 山东| 巴青县| 桐乡市| 湘阴县| 同仁县| 肇州县| 宜春市| 阳新县| 慈利县| 宿迁市| 家居| 邵阳市| 清流县| 黄浦区| 福泉市| 铜陵市| 邯郸县| 那曲县| 丹东市| 皋兰县| 平潭县| 齐河县| 渑池县| 黄石市| 新蔡县| 福清市| 山西省| 佛坪县| 龙门县| 桐柏县| SHOW| 沁阳市| 密云县| 扬中市| 南部县| 睢宁县| 衡东县| 湘西| 富民县| 石屏县| 延长县| 江津市| 阳春市| 浠水县| 偃师市| 永康市| 吉首市| 大城县| 安龙县| 成都市| 临清市| 雷山县| 山西省| 上蔡县| 巴南区| 泾阳县| 苍溪县| 天等县| 华亭县| 花莲县| 昌黎县| 广安市| 赤水市| 清远市| 德惠市| 巴林右旗| 宣汉县| 洮南市| 潞西市| 黎城县| 庆元县| 龙山县| 日喀则市| 天津市| 贵南县| 保德县| 财经| 万山特区| 新乡市| 吉林市| 滦平县| 改则县| 安陆市| 达拉特旗| 古蔺县| 中超| 台南县| 东乌珠穆沁旗| 玛曲县| 香河县| 孝感市| 会理县| 玛多县| 山东| 蓬溪县| 类乌齐县| 武城县| 闻喜县| 呼图壁县| 麻江县| 峡江县| 余姚市| 弥勒县| 松江区| 百色市| 云林县| 浦城县| 灵宝市| 岑溪市| 清水县| 九龙坡区| 红原县| 手游| 江孜县| 民县| 礼泉县| 舞钢市| 长治县| 普兰县| 辽阳市| 溆浦县| 鹿泉市| 天峨县| 邢台市| 宜兴市| 莱阳市| 冀州市| 尚志市| 临城县| 偃师市| 梁山县| 颍上县| 昌乐县| 逊克县| 通渭县| 原阳县| 怀远县| 疏勒县| 临海市| 大荔县| 广宗县| 长垣县| 普宁市| 红河县| 华池县| 永胜县| 丁青县| 光山县| 江都市| 中阳县| 华阴市| 胶州市| 新竹县| 水富县| 宁津县| 荔波县| 铜陵市| 资阳市| 庆阳市| 海淀区| 通河县| 莱西市| 新化县| 绥阳县| 沅陵县| http://wap.qoitqu.fit http://www.sgaydp.fit http://wap.jrzsvv.fit http://www.jghhgs.fit http://m.spuefb.fit http://m.loctbh.fit http://msmnpw.fit http://wap.vveufs.fit http://bm1961xerchandisez.fit http://wap.ekhjyj.fit http://wap.uooqsf.fit http://wap.qbgskn.fit http://wap.mbripy.fit http://pqeifd.fit http://wap.erqipw.fit http://atsapr.fit http://wap.ymnsxb.fit http://efxzvk.fit