bigdata

2024-05-15 00:38

文章标签 bigdata

本文主要是介绍bigdata，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

这篇关于bigdata的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！

http://www.chinasem.cn/article/990315。 23002807@qq.com

[bigdata-037]apache hue 用SQL获取数据以及可视化

1. hue官网 https://github.com/cloudera/hue http://gethue.com/ 2. hue的功能有py2+django开发，提供Hive, Impala, MySQL, Oracle, PostgreSQL, Spark SQL, Solr SQL, Phoenix...等SQL数据获取和页面展示 3. 用docker 安装hue

[bigdata-036] mit-scheme试用

1. 安装Mit-scheme apt-get install mit-scheme 2. 写一个hello wold代码， hi.scm (begin(display "Hello, World!")(newline)) 3. 在命令行执行 scheme，进入交互界面，然后输入命令 (load 'hi.scm') 将执行这个文件，然后输出 "Hello, World

[bigdata-035]用js dtree展示一个树形结构 py3+dtree+jquery

1. dtree的下载 http://destroydrop.com/javascripts/tree/default.htm 2. 目录结构 . ├── static │ ├── css │ │ └── dtree.css │ ├── img │ │ ├── base.gif │ │ ├── cd.gif │ │ ├── diffDoc.gif

[bigdata-34] pyenv和anaconda 4.2 和 python3.5和 ubuntu 16.04 安装

1. pyenv 官网 https://github.com/yyuu/pyenv 2. 安装 git clone https://github.com/yyuu/pyenv.git ~/.pyenv echo 'export PYENV_ROOT="$HOME/.pyenv"' >> ~/.bashrc echo 'export PATH="$PYENV_ROOT/bin:$PAT

[bigdata-033] 互联网金融-大数据架构平台和业务流程

一张图,excited!

[bigdata-032] 把json文件导入到mongodb

用mongoimport命令 mongoimport -d db1 -c colle1 --type json --file cc.json --host 114.55.66.77 --upsert -u user1 -p passwd1 这个命令，如果同id的记录在，就更新，如果记录id不重复，就插入。因为upsert，所以会比较慢。 mongoimport -d db1 -c colle

[bigdata-031] python3+selenium 做抓取

1. 安装 1.1 pip3 install -U selenium 1.2 下载 https://github.com/mozilla/geckodriver/releases/download/v0.13.0/geckodriver-v0.13.0-linux64.tar.gz 解压缩，然后放到/usr/bin目录 2. 抓取豆瓣 #!/usr/bin/env python3

[bigdata-030] cdh 5.9的impyla操作hiveserver2

参考文献：http://www.aichengxu.com/view/11094184 1. cdh 5.9 2. 开发机已经安装了impyla pip install thrift_sasl pip install sasl 3. 在cdh集群的一个节点启动hiveserver2 3.1 修改/etc/hive/conf.cloudera.hive/hive-sit

[bigdata-029] 在centos 7上安装maria

centos 7以上版本支持mysql的另一个分支maria 安装方式如下正确安装mariadb http://blog.csdn.net/default7/article/details/39138139 http://blog.csdn.net/default7/article/details/41973887 yum install mariadb* service m

[bigdata-028]apache nifi 从mysql导出数据到hbase

0.在hbase节点，启动thrift服务 hbase-daemon.sh start thrift 1. 在本机启动nif ./bin/nifi.sh start 2. 在浏览器输入http://localhost:8080/nifi，看到nifi的界面 3. 拖一个processor ExecuteSQL到界面 3.1 在processor上点击右键

bigdata

相关文章