Welcome to Tuya! Glad to see you here!~ If you want your life to stand for peace and kindness,it’s helpto do kind,peaceful things.One of my favorite ways to do this is by developing my own helping rituals. These little acts of kindness are oppor...
二年学说话，一生学闭嘴
时间总是过得很快，快到难以察觉。转眼间2020年已经到了尾声，今年的史官可能笔杆子都快写断了吧。今年真的发生了太多太多的事情，即使发生了这么多事，可还是感觉时间过得很快。。 还记得大年三十那天晚上，老婆用水银温度计查体温，毕竟那时候人心惶惶，都感觉自己不太对劲，时时关注自己的体温。结果显示是发烧了，一家人都很紧张，因为也是10天前刚从武汉回来。反反复复确认，我也决定给自己测测，结果我也发烧了~ 就这样，大年三十，我俩裹得严严实实开车去了当地的...
中国地震台网数据爬取
12345678910111213141516171819202122232425262728293031323334353637383940414243import scrapyimport refrom scrapy import Requestfrom urllib import parsefrom SpiderDemo.items import SpiderdemoItemclass CeicSpider(scrapy.Spider): name = 'c...
MapReduce编程详解
MapReduce编程模型 将作业拆分为Map和Reduce两个阶段 准备map处理的输入数据 Mapper处理 Shuffle Reduce处理 结果输出 入门：编写MapReduce程序 编写wordcount程序 编辑pom.xml，添加jar包 12345<dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client<...
HDFS API编程(二)
HDFS 常用API123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115...
HDFS API编程(一)
实践1 – 开发环境搭建 Intellij IDEA使用maven 管理项目 创建项目 点击Finish出现如下界面需等待右下角蓝条加载完成(下载时间较长，需耐心等待蓝条加载完成) 显示 maven execution finished 说明加载完成 在pom.xml文件中junit 版本最好高于4.10以上方便做测试所有对pom.xml文件的修改需等待蓝条下载结束 12345678<dependencies> <dependency> &l...
hadoop配置常见问题汇总
1. jps 显示没有namenode 主机名配置出错 ip映射出错 多次格式化 2. jps显示正确，但是浏览器http://hadoop:50070却打不开 防火墙问题 查看防火墙是否打开sudo firewall-cmd --state显示 1running 关闭防火墙sudo systemctl stop firewalld.service 检查是否关闭sudo firewall-cmd --state显示 1not running 重新用浏览器访问 禁止防火墙开...