SMGoro Blog 虚拟世界的观测者のRecord | 享受世间不可多得的静谧时光 2025-04-11T15:55:23.000Z http://blog.imc.re/ SummerGoro Hexo fern wifi cracker 报错解决方案 http://blog.imc.re/archives/91fb.html 2024-04-20T10:30:16.000Z 2025-04-11T15:55:23.000Z

查看无线网卡

1
airmon-ng

重新设置无线网卡

1
2
ip link set wlan0 down
ip link set wlan0 name wlan0mon
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux查询操作 http://blog.imc.re/archives/b59e.html 2023-12-20T14:50:37.000Z 2025-04-11T15:55:23.000Z
  1. whereis用来寻找可执行文件的位置
1
2
3
4
5
6
7
8
[root@master ~]# whereis ls
ls: /usr/bin/ls /usr/share/man/man1/ls.1.gz
[root@master ~]# ls
aaa  anaconda-ks.cfg  localperl  nohup.out  perl5  ShiSai2022-1.0-SNAPSHOT.jar 
spark-yarn-logs  zookeeper.out
[root@master ~]# cd /usr/bin/
[root@master bin]# ll ls
-rwxr-xr-x. 1 root root 117680 10月 31 2018 ls
  1. whatis用来获取命令的简介
1
2
[root@master bin]# whatis ls
ls (1)               - list directory contents
  1. find用来寻找文件的位置

从根目录下开始，寻找cd这个文件的位置。一共找到了3处。

1
2
3
4
5
6
7
[root@master ~]# find / -name cd
/root/.npm/_cacache/index-v5/cd
/root/.npm/_cacache/content-v2/sha512/f7/cd
/usr/bin/cd
[root@master ~]# cd /usr/bin/
[root@master bin]# ls cd
cd
  1. grep用来查找文件中，包含指定字符串的行

建立./aaa.txt并插入一些内容

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
[root@master ~]# echo "hello hadoop" > ./aaa.txt
[root@master ~]# echo "hello hdfs" >> ./aaa.txt
[root@master ~]# echo "hello hdfs" >> ./aaa.txt
[root@master ~]# echo "hello yarn" >> ./aaa.txt
[root@master ~]# echo "hello spark" >> ./aaa.txt
[root@master ~]# echo "hello hive" >> ./aaa.txt
[root@master ~]# echo "hello flink" >> ./aaa.txt
[root@master ~]# echo "hello hbase" >> ./aaa.txt
[root@master ~]# cat ./aaa.txt
hello hadoop
hello hdfs
hello hdfs
hello yarn
hello spark
hello hive
hello flink
hello hbase

在./aaa.txt里查找含有字符串hadoop的行

1
2
3
4
5
6
7
[root@master ~]# grep hadoop ./aaa.txt
hello Hadoop
[root@master ~]# grep flink ./aaa.txt
hello flink
[root@master ~]# grep hdfs ./aaa.txt
hello hdfs
hello hdfs
  1. 用数字法修改文件的权限

./aaa.txt原来的权限：对于文件的所有者而言aaa.txt可读可写不可执行，对于同组用户而言aaa.txt可读不可写不可执行，对于其他用户而言aaa.txt可读不可写不可执行

1
2
3
4
5
6
[root@master ~]# ll ./aaa.txt
-rw-r--r--. 1 root root 93 11月 20 08:21 ./aaa.txt
 421421421
  6   4  4
-rwxr--r--
  7  4  4

把./aaa.txt变成：对于文件的所有者而言aaa.txt可读可写可执行，对于同组用户而言aaa.txt可读不可写不可执行，对于其他用户而言aaa.txt可读不可写不可执行

1
2
3
[root@master ~]# chmod 744 ./aaa.txt
[root@master ~]# ll ./aaa.txt
-rwxr--r--. 1 root root 93 11月 20 08:21 ./aaa.txt

把./aaa.txt变成：对于文件的所有者而言aaa.txt可读可写可执行，对于同组用户而言aaa.txt可读可写可执行，对于其他用户而言aaa.txt可读可写可执行

1
2
3
[root@master ~]# chmod 777 ./aaa.txt
[root@master ~]# ll ./aaa.txt
-rwxrwxrwx. 1 root root 93 11月 20 08:21 ./aaa.txt

把./aaa.txt变回到原来状态

1
2
3
[root@master ~]# chmod 644 ./aaa.txt
[root@master ~]# ll ./aaa.txt
-rw-r--r--. 1 root root 93 11月 20 08:21 ./aaa.txt

课堂练习：

把hadoop01镜像转到20230912，并启动hadoop01，用Ubuntu进行联机。完成下面的操作，并把命令和结果截图粘贴到ubuntu桌面下的目录Release的“模块A提交的结果.docx”。要求所有命令均使用绝对路径。

  1. 在/root目录下建立子目录bbb
1
mkdir /root/bbb
  1. 在/root/bbb目录下建立文件b01.txt
1
touch /root/bbb/b01.txt

  1. 在b01.txt中插入以下内容：

    Hello HadoopHello hdfsHello sparkHello flinkHello yarnHello hbase

1
2
3
4
5
6
7
8
cat >> /root/bbb/b01.txt << EOF
Hello Hadoop
Hello hdfs
Hello spark
Hello flink
Hello yarn
Hello hbase
EOF

  1. 将b01.txt拷贝为b02.txt，并在b02.txt中新增两行内容：

    Hello RedisHello clickhouse

1
2
3
cp /root/bbb/b01.txt /root/bbb/b02.txt
echo "Hello Redis" >> /root/bbb/b02.txt
echo "Hello clickhouse" >> /root/bbb/b02.txt
  1. 用diff命令比较b01.txt、b02.txt的不同之处
1
diff /root/bbb/b01.txt /root/bbb/b02.txt
  1. 用grep命令查找b01.txt中含有flink的行
1
grep "flink" /root/bbb/b01.txt
  1. 修改/root/bbb/b01.txt的权限：文件所有者可读可写可执行，同组用户可读可写不可执行，其他用户不可读不可写不可执行，并用ls命令查看结果
1
chmod 760 /root/bbb/b01.txt && ls -l /root/bbb/b01.txt
  1. 修改/root/bbb/b02.txt的权限：文件所有者可读不可写可执行，同组用户可读不可写不可执行，其他用户不可读不可写可执行，并用ls命令查看结果
1
chmod 441 /root/bbb/b01.txt && ls -l /root/bbb/b01.txt
  1. 用find命令查找b01.txt文件的位置
1
find / -name b01.txt
  1. 用whereis命令查找grep命令文件的位置
1
whereis grep
  1. 用tar命令将到/opt/hadoop-2.7.7.tar.gz解压到/usr/local/src下面。
1
tar -xvzf /opt/hadoop-2.7.7.tar.gz -C /usr/local/src
  1. 用find命令查找文件stop-all.sh的位置。
1
find / -name stop-all.sh
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux管道命令 http://blog.imc.re/archives/1903.html 2023-12-18T14:18:16.000Z 2025-04-11T15:55:23.000Z
  1. 管道命令：|

管道命令的作用：前一个命令的输出是后一个命令的输入

例如：统计目前有几个用户登录

1
2
3
4
[root@master ~]# who
root     pts/0        2023-12-18 08:08 (192.168.152.130)
[root@master ~]# who | wc -l
1

查看/etc下面的文件和文件夹及其子文件夹、子文件的详细信息，并以可翻页的形式显示：

1
[root@master ~]# ls -Rl /etc | less

增加一个用户aaa，并查看/etc/passwd的内容，该文件存放了所有的系统用户、root用户、自定义用户。增加一个用户aaa，就可以看到该文件最后增加的相应的一行内容。用管道命令统计该文件的行数、字数、字符数。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
[root@master ~]# adduser aaa
[root@master ~]# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

…………

nfsnobody:x:65534:65534:Anonymous NFS User:/var/lib/nfs:/sbin/nologin
mysql:x:27:27:MySQL Server:/var/lib/mysql:/bin/false
aaa:x:1000:1000::/home/aaa:/bin/bash
[root@master ~]# cat /etc/passwd | wc
     30      59    1491
# （行数） （字数） （字符数）

查看是否存在用户aaa

1
2
[root@master ~]# cat /etc/passwd | grep aaa
aaa:x:1000:1000::/home/aaa:/bin/bash

命令rpm -qa可以查看目前安装了哪些应用程序。现在要用管道命令，检查是否安装了mysql数据库：

1
2
3
4
5
6
[root@master ~]# rpm -qa | grep mysql
mysql-community-server-5.7.18-1.el7.x86_64
mysql-community-common-5.7.18-1.el7.x86_64
mysql-community-libs-5.7.18-1.el7.x86_64
mysql-community-client-5.7.18-1.el7.x86_64
mysql-community-devel-5.7.18-1.el7.x86_64

查看mysql数据库中有多少个组件：

1
2
[root@master ~]# rpm -qa | grep mysql | wc -l
5

通过这个命令，说明了管道命令是可以级联的，从而实现更加复杂的功能。

  1. vi编辑器操作

（1）vi编辑器的启动和退出

用命令：vi+文件名：进入vi编辑器

按i键进入编辑模式，可以输入内容

按:wq保存退出，按:q!不保存退出

（2）vi编辑器的工作模式

编辑模式：进入vi编辑器以后的默认模式

插入模式：在编辑模式下，按i键，进入插入模式

命令模式：在编辑模式下，按：键，进入命令模式

（3）vi编辑器常用命令

:q!  不保存退出

:wq  保存退出

:?单词   查找文件中的某一个单词位置，查找定位后，按n键可以连续定位下一个单词。

😒/单词1/单词2/g   把文件中所有的单词1，替换成单词2

:d   删除当前行，或者在编辑模式状态下，在某一行上按dd，直接删除这一行

课堂练习：

  1. 在/opt下建立文件夹/opt/aaa
1
mkdir /opt/aaa
  1. 用vi编辑器建立文件/opt/aaa/a01.txt,并输入下面的内容
1
2
3
4
5
6
7
8
vi /opt/aaa/a01.txt
hello hadoop
hello spark
hello spark
hello hdfs
hello hdfs
hello hdfs
hello spark spark

image.png

  1. 保存并退出

  2. 用管道命令统计/opt/aaa/a01.txt，一共有几行

1
cat /opt/aaa/a01.txt | wc -l
  1. 用管道命令找到所有的含有hdfs单词的内容
1
grep "hdfs" /opt/aaa/a01.txt
  1. 用管道命令统计含有spark单词的行，一共有几行
1
grep "spark" /opt/aaa/a01.txt | wc -l
  1. 用管道命令统计spark单词有几个
1
grep -o "spark" /opt/aaa/a01.txt | wc -l
  1. 查看系统中是否安装了hbase软件包
1
rpm -qa | grep hbase
  1. 新建用户bbb，并查找/etc/passwd中是否存在该用户
1
2
useradd bbb
grep bbb /etc/passwd

  1. 在vi编辑器中，用?命令，查找hello单词

  2. 在vi编辑器中，用:s/单词1/单词2/g命令，将所有的hello，替换成hi

1
2
3
4
5
6
7
# 进入vi 使用如下命令
vi /opt/aaa/a01.txt
:%s/hello/hi/g
:wq

# 方法二
sed -i s/hello/hi/g /opt/aaa/a01.txt
  1. 用管道命令，统计包含hi的内容一共有多少行，并利用重定向命令将结果写入/opt/aaa/a02.txt
1
grep hi /opt/aaa/a01.txt | wc -l >> /opt/aaa/a02.txt
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux环境设置 http://blog.imc.re/archives/1ba9.html 2023-12-11T14:56:38.000Z 2025-04-11T15:55:23.000Z
  1. 工作环境设置文件

（1）系统环境

/etc/profile

(2) root用户的环境

/root/.bash_profile

  1. 将某一个目录/aaa加入工作环境文件，实现在任意位置均可执行该目录下面的程序

（1）建立/aaa文件夹，并加入工作环境文件

1
2
[root@master ~]# cd /
[root@master /]# mkdir /aaa

(2) 在/etc/profile中插入下面的内容：

1
2
3
4
5
6
7
[root@master /]# vi /etc/profile  
# 安装flume环境
export FLUME_HOME=/opt/apache-flume-1.7.0-bin
export PATH=$PATH:$FLUME_HOME/bin
# 将/aaa文件夹加入
export AAA_HOME=/aaa
export PATH=$PATH:$AAA_HOME

(3) 在/aaa中建立一个简单计时器脚本

1
2
3
4
5
6
7
8
9
10
11
12
13
14
[root@master /]# cd /aaa
[root@master aaa]# vi time01.sh
echo "start"
sleep 1;echo "----5----";
sleep 1;echo "----4----";
sleep 1;echo "----3----";
sleep 1;echo "----2----";
sleep 1;echo "----1----";
sleep 1;
echo "stop"
[root@master aaa]# chmod 777 ./time01.sh
[root@master aaa]# ll
总用量 4
-rwxrwxrwx. 1 root root 164 12月 11 08:28 time01.sh

(4) 使修改的工作环境文件生效

1
[root@master aaa]# source /etc/profile

(5)在任意位置均可执行：

1
2
3
4
5
6
[root@master aaa]# cd /
[root@master /]# time01.sh
start
----5----
----4----
----3----
  1. grep打印出所有符合指定规则的文本行
1
2
3
4
5
6
[root@master /]# cd /aaa
[root@master aaa]# ll
总用量 4
-rwxrwxrwx. 1 root root 164 12月 11 08:28 time01.sh
[root@master aaa]# grep 'start' time01.sh
echo "start"
  1. 正则表达式

所有的正则表达式需要用单引号括起来

. 匹配单个任意字符

[list] 匹配字符串列表中的一个字符

*  匹配前一个字符0次或多次

^ 在行头匹配正则表达式

  1. 重定向

重定向是指不使用标准的输入输出接口，而进行重新指定

< 输入重定向

或 > 输出重定向

2>或2>> 错误重定向

&> 同时实现输出重定向和错误重定向

1
2
3
[root@master ~]# ll /aaa
总用量 4
-rwxrwxrwx. 1 root root 164 12月 11 08:28 time01.sh

将/aaa文件夹的ll显示的内容保存到/root的result01.txt中

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
[root@master ~]# ll /aaa > result01.txt
[root@master ~]# ll
总用量 72
drwxr-xr-x. 4 root root    36 11月 16 2022 aaa
-rw-------. 1 root root  1257 11月 18 2021 anaconda-ks.cfg
drwxr-xr-x. 5 root root    39 11月 18 2021 localperl
-rw-------. 1 root root  1623 7月  11 21:08 nohup.out
drwxr-xr-x. 5 root root    39 11月 18 2021 perl5
-rw-r--r--. 1 root root    65 12月 11 09:09 result01.txt
-rw-r--r--. 1 root root 50112 7月  11 21:31 ShiSai2022-1.0-SNAPSHOT.jar
-rw-r--r--. 1 root root     0 11月 15 2022 spark-yarn-logs
-rw-r--r--. 1 root root  4175 11月 16 2022 zookeeper.out
[root@master ~]# cat result01.txt
总用量 4
-rwxrwxrwx. 1 root root 164 12月 11 08:28 time01.sh

把/tmp里面的内容追加到result01.txt中

1
2
3
4
5
6
7
8
9
10
11
[root@master ~]# ll /tmp
总用量 0
drwx------. 3 root root 17 12月 11 08:07 systemd-private-03f98bcc8dcb4c7b8b38ca9ae50eaf49-chronyd.service-XdsvpJ
drwx------. 2 root root  6 12月 11 08:07 vmware-root_8740-2865761114
[root@master ~]# ll /tmp >> result01.txt
[root@master ~]# cat result01.txt
总用量 4
-rwxrwxrwx. 1 root root 164 12月 11 08:28 time01.sh
总用量 0
drwx------. 3 root root 17 12月 11 08:07 systemd-private-03f98bcc8dcb4c7b8b38ca9ae50eaf49-chronyd.service-XdsvpJ
drwx------. 2 root root  6 12月 11 08:07 vmware-root_8740-2865761114

将文件的输出信息和错误信息保存到result02.txt中

1
2
3
4
5
6
7
8
9
10
11
[root@master ~]# date
2023年 12月 11日 星期一 09:15:08 CST
[root@master ~]# data
-bash: data: 未找到命令
[root@master ~]# data &> result02.txt
[root@master ~]# cat result02.txt
-bash: data: 未找到命令
[root@master ~]# date &>> result02.txt
[root@master ~]# cat result02.txt
-bash: data: 未找到命令
2023年 12月 11日 星期一 09:16:48 CST

课堂练习：

  1. 在/opt下建立文件夹/opt/bbb，并将该文件夹写入工作环境文件/etc/profile
1
2
mkdir /opt/bbb
echo "export PATH=$PATH:/opt/bbb" >> /etc/profile
  1. 在/opt/bbb中建立一个可执行文件hello.sh,可以向屏幕中打印一行hello world字符
1
echo "echo "hello world"" >> /opt/bbb/hello.sh
  1. 生效修改的工作环境文件/etc/profile
1
source /etc/profile
  1. 在/root目录中直接输入hello.sh进行验证
1
2
cd /root
sh hello.sh
  1. 用重定向符号将hello.sh的结果保存到/root/result001.txt中
1
sh hello.sh >> /root/result001.txt
  1. 打印/root/result001.txt
1
cat /root/result001.txt
  1. 用grep命令在/root/result001.txt中查找world字符
1
grep world /root/result001.txt
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux变量使用 http://blog.imc.re/archives/43a5.html 2023-12-04T14:13:54.000Z 2025-04-11T15:55:22.999Z

Linux变量使用

  1. 变量的定义与引用，用=进行定义，用$进行引用
1
2
3
4
5
[root@master ~]# name=zhangsan
[root@master ~]# echo $name
zhangsan
[root@master ~]# echo name
name

$在单引号中不能被识别，在双引号中可识别

1
2
3
4
[root@master ~]# echo "I am $name"
I am zhangsan
[root@master ~]# echo 'I am $name'
I am $name
  1. 环境变量

PATH环境变量：寻找可执行文件的搜索路径

1
2
[root@master ~]# echo $PATH
/root/perl5/bin:/root/perl5/bin:/opt/kafka_2.11-2.0.0/bin:/opt/zookeeper-3.4.12/bin:/opt/flink-1.10.2/bin:/opt/spark-2.1.1-bin-hadoop2.7//bin:/opt/apache-hive-2.3.4-bin/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/opt/hadoop-2.7.7/bin:/opt/hadoop-2.7.7/sbin:/usr/java/jdk1.8.0_162/bin:/usr/java/jdk1.8.0_162/jre/bin:/opt/scala-2.11.0/bin:/opt/apache-flume-1.7.0-bin/bin:/root/bin

PWD：当前工作目录

1
2
[root@master ~]# echo $PWD
/root

PS1和PS2：命令行的一级提示符和二级提示符

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
[root@master ~]# echo $PS1
[\u@\h \W]\$
[root@master ~]# echo $PS2
>

[root@master ~]# echo $PS1
[\u@\h \W]\$
[root@master ~]# echo $PS2
>
[root@master ~]# mysql -u root -p
Enter password: # （输入Passwd123！）
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.7.18 MySQL Community Server (GPL)

Copyright (c) 2000, 2017, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| bak                |
| hive               |
| mysql              |
| performance_schema |
| shtd_result        |
| shtd_store         |
| shtd_store01       |
| sys                |
+--------------------+
9 rows in set (0.02 sec)

mysql> exit
Bye
[root@master ~]#

OLDPWD：前一个工作目录

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
[root@master ~]# ll
总用量 68
drwxr-xr-x. 4 root root    36 11月 16 2022 aaa
-rw-------. 1 root root  1257 11月 18 2021 anaconda-ks.cfg
drwxr-xr-x. 5 root root    39 11月 18 2021 localperl
-rw-------. 1 root root  1623 7月  11 21:08 nohup.out
drwxr-xr-x. 5 root root    39 11月 18 2021 perl5
-rw-r--r--. 1 root root 50112 7月  11 21:31 ShiSai2022-1.0-SNAPSHOT.jar
-rw-r--r--. 1 root root     0 11月 15 2022 spark-yarn-logs
-rw-r--r--. 1 root root  4175 11月 16 2022 zookeeper.out
[root@master ~]# cd aaa
[root@master aaa]# echo $PWD
/root/aaa
[root@master aaa]# echo $OLDPWD
/root

HISTFILE：储存历史命令

1
2
3
4
[root@master aaa]# echo $HISTFILE
/root/.bash_history
[root@master aaa]# vi /root/.bash_history  （退出----按：，按q，按回车键）
[root@master aaa]#

HOME:当前用户的用户目录

1
2
[root@master ~]# echo $HOME
/root

3.PATH环境变量的综合运用

在PATH环境变量之前加入新的路径，/tmp

1
2
3
[root@master ~]# export PATH=/tmp:$PATH
[root@master ~]# echo $PATH
/tmp:/root/perl5/bin:/root/perl5/bin:/opt/kafka_2.11-2.0.0/bin:/opt/zookeeper-3.4.12/bin:/opt/flink-1.10.2/bin:/opt/spark-2.1.1-bin-hadoop2.7//bin:/opt/apache-hive-2.3.4-bin/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/opt/hadoop-2.7.7/bin:/opt/hadoop-2.7.7/sbin:/usr/java/jdk1.8.0_162/bin:/usr/java/jdk1.8.0_162/jre/bin:/opt/scala-2.11.0/bin:/opt/apache-flume-1.7.0-bin/bin:/root/bin

转到新的路径/tmp下面制造了一个可执行文件hello

1
2
3
4
5
6
7
8
9
[root@master ~]# cd /tmp
[root@master tmp]# ll
总用量 0
drwx------. 3 root root 17 12月  4 08:08 systemd-private-29aad2a4b89b4c6b8901f17655036ac6-chronyd.service-IX3I1a
drwx------. 2 root root  6 12月  4 08:08 vmware-root_8736-2857568991
[root@master tmp]# vi hello
# （按i键，看到屏幕底下有insert字样，此时输入）
echo "hello hadoop!" 
# (按Esc键，屏幕底下的insert字样消失，再按：，按wq，按回车键，此时就保存退出了vi编辑器)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
[root@master tmp]# ll hello
-rw-r--r--. 1 root root 21 12月  4 09:00 hello
[root@master tmp]# chmod 777 hello 
[root@master tmp]# ll hello
-rwxrwxrwx. 1 root root 21 12月  4 09:00 hello
[root@master tmp]# cd /root
[root@master ~]# echo $PATH
/tmp:/root/perl5/bin:/root/perl5/bin:/opt/kafka_2.11-2.0.0/bin:/opt/zookeeper-3.4.12/bin:/opt/flink-1.10.2/bin:/opt/spark-2.1.1-bin-hadoop2.7//bin:/opt/apache-hive-2.3.4-bin/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/opt/hadoop-2.7.7/bin:/opt/hadoop-2.7.7/sbin:/usr/java/jdk1.8.0_162/bin:/usr/java/jdk1.8.0_162/jre/bin:/opt/scala-2.11.0/bin:/opt/apache-flume-1.7.0-bin/bin:/root/bin
[root@master ~]# hello
hello hadoop!
[root@master ~]# cd /tmp
[root@master tmp]# ll
总用量 4
-rwxrwxrwx. 1 root root 21 12月  4 09:00 hello
drwx------. 3 root root 17 12月  4 08:08 systemd-private-29aad2a4b89b4c6b8901f17655036ac6-chronyd.service-IX3I1a
drwx------. 2 root root  6 12月  4 08:08 vmware-root_8736-2857568991
[root@master tmp]# rm hello
rm：是否删除普通文件 "hello"？y
[root@master tmp]# ll
总用量 0
drwx------. 3 root root 17 12月  4 08:08 systemd-private-29aad2a4b89b4c6b8901f17655036ac6-chronyd.service-IX3I1a
drwx------. 2 root root  6 12月  4 08:08 vmware-root_8736-2857568991
[root@master tmp]# cd /root
[root@master ~]# hello
-bash: /tmp/hello: 没有那个文件或目录

课堂练习

（要求所有的命令均使用全局路径，将结果截图粘贴到桌面Release下面的word文件“模块A提交的结果”）：

  1. 在根目录下面建立文件夹/bbb
1
mkdir /bbb
  1. 在文件夹/bbb中建立文件hi.sh
1
touch /bbb/hi.sh
  1. 在文件/bbb/hi.sh中，用vi编辑器输入10秒倒计时程序如下：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
vi /bbb/hi.sh
# 点击 i 键 进入 insert 编辑模式
echo "----start----"
echo "----10----";sleep 1;
echo "----9----";sleep 1;
echo "----8----";sleep 1;
echo "----7----";sleep 1;
echo "----6----";sleep 1;
echo "----5----";sleep 1;
echo "----4----";sleep 1;
echo "----3----";sleep 1;
echo "----2----";sleep 1;
echo "----1----";sleep 1;
echo "----launch!----"
保存并退出。(点击Esc退出insert编辑模式后输入 `:wq` )
  1. 设置hi.sh文件为可执行文件
1
chmod +x /bbb/hi.sh
  1. 把/bbb路径添加在PATH环境变量中，并生效
1
2
echo "PATH=\$PATH:/bbb" >> /etc/profile
source /etc/profile
  1. 在系统任意位置，执行hi.sh命令，将结果粘贴。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
[root@MySQL01 ~]# sh hi.sh
----start----
----10----
----9----
----8----
----7----
----6----
----5----
----4----
----3----
----2----
----1----
----launch!----
[root@MySQL01 ~]#
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux综合练习 http://blog.imc.re/archives/d4fd.html 2023-11-28T14:12:13.000Z 2025-04-11T15:55:23.000Z

Linux综合课堂练习

将命令和结果粘贴在桌面的release目录下，模块A提交的结果文件中。要求命令参数文件路径使用绝对路径。

  1. 建立文件夹/aaa/a01
1
mkdir -p /aaa/a01
  1. 转移到/aaa/a01目录下，并显示当前路径
1
cd /aaa/a01 && pwd
  1. 在文件夹/aaa/a01下新建文件myHadoop01.txt，内容为：Hello HadoopHello HDFSHello spark
1
2
3
4
5
cat >> /aaa/a01/myHadoop01.txt << EOF
Hello Hadoop
Hello HDFS
Hello spark
EOF
  1. 新建文件夹/bbb/b01
1
mkdir -p /bbb/b01
  1. 将文件/aaa/a01/myHadoop01.txt，复制到/bbb/b01目录下，并改名为myHadoop02.txt。
1
cp /aaa/a01/myHadoop01.txt /bbb/b01/myHadoop02.txt
  1. 在/bbb/b01/myHadoop02.txt末尾，新增加一行内容：Hello Yarn
1
echo "Hello Yarn" >> /bbb/b01/myHadoop02.txt
  1. 比较/aaa/a01/myHadoop01.txt和/bbb/b01/myHadoop02.txt的不同之处。
1
diff /aaa/a01/myHadoop01.txt /bbb/b01/myHadoop02.txt
  1. 打印/aaa/a01/myHadoop01.txt的前两行内容。
1
head -n 2 /aaa/a01/myHadoop01.txt
  1. 打印/bbb/b01/myHadoop02.txt的最后1行内容。
1
tail -n 1 /bbb/b01/myHadoop02.txt
  1. 将文件夹/aaa，拷贝为/ccc
1
cp -r /aaa /ccc
  1. 删除/ccc/a01/myHadoop01.txt文件。
1
rm /ccc/a01/myHadoop01.txt
  1. 分别删除文件夹/ccc/a01，/ccc
1
2
rmdir /ccc/a01
rmdir /ccc
  1. 为文件/aaa/a01/myHadoop01.txt，建立软连接/aaa/a01/myHadoop
1
ln -s /aaa/a01/myHadoop01.txt /aaa/a01/myHadoop
  1. 用tar命令将/bbb/b01/myHadoop02.txt压缩为/bbb/b01/myHadoop02.tar.tz
1
2
cd /bbb/b01
tar cvzf myHadoop02.tar.tz myHadoop02.txt
  1. 查找电脑中所有以myHadoop字符开头的文件。
1
find / -name "myHadoop*"
  1. 查找/aaa/a01/myHadoop01.txt中所有包含Hadoop的行。
1
grep "Hadoop" /aaa/a01/myHadoop01.txt
  1. 显示/aaa/a01/myHadoop01.txt的属性，并用文字说明该文件的文件所有者、同组用户、其他用户分别具有什么权限。
1
2
3
4
5
6
root@RC:/# ll /aaa/a01/
总用量 12
drwxr-xr-x 2 root root 4096 11月 28 08:12 ./
drwxr-xr-x 3 aaa  root 4096 11月 28 08:04 ../
lrwxrwxrwx 1 root root   23 11月 28 08:12 myHadoop01 -> /aaa/a01/myHadoop01.txt*
-rw-r--r-- 1 root root   36 11月 28 08:07 myHadoop01.txt*
  • 文件所有者：读写权限
  • 同组用户：读权限
  • 其他用户：读权限
  1. 用数字的方式，将myHadoop01.txt的权限设置为文件所有者可读不可写可执行，同组用户只可读，其他用户只可执行。
1
chmod 541 /aaa/a01/myHadoop01.txt
  1. 用字母的方式，将myHadoop01.txt的权限设置为一切用户均可读可写可执行。
1
chmod a=rwx /aaa/a01/myHadoop01.txt
  1. 新建用户aaa
1
useradd aaa
  1. 将文件夹/aaa的所有者设置为aaa用户，并显示/aaa的属性
1
chown aaa /aaa
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux 权限操作 http://blog.imc.re/archives/e5ff.html 2023-11-27T14:11:32.000Z 2025-04-11T15:55:22.999Z

Linux 权限操作

1.用字母的方式改变权限用u表示文件所有者，g表示同组用户，o表示其他用户用r表示可读，用w表示可写，用x表示可执行，文件的权限就可以表示为字母等式的组合

1
[root@master ~]# touch a01.txt

使文件所有者具有可读可写可执行：

1
[root@master ~]# chmod u=rwx a01.txt

使同组用户和其他用户可读不可写可执行：

1
[root@master ~]# chmod go=rx a01.txt

在原来的基础上，为同组用户增加可写属性：

1
[root@master ~]# chmod g+w a01.txt

在原来的基础上，收回其他用户可执行的属性：

1
[root@master ~]# chmod o-x a01.txt

文件所有者可读不可写可执行，同组用户收回可写属性，其他用户增加可写属性：

1
[root@master ~]# chmod u=rx,g-w,o+w a01.txt

2.修改文件的所有者与所属组chown

增加用户aaa：

1
[root@master ~]# useradd aaa

将文件a01.txt的所有者改为aaa：

1
2
3
[root@master ~]# chown aaa a01.txt 
[root@master ~]# ll a01.txt
-r-xr-xrw-. 1 aaa root 0 11月 27 08:15 a01.txt

Linux权限数字表达

由 智谱清言 生成回答, 可能含有不正确的内容, 如有错误欢迎指正.

在Linux中，文件和目录的权限可以用数字来表示，这些数字对应于权限的读（r）、写（w）和执行（x）。以下是各个权限对应的数字：

  • 读（r）：4
  • 写（w）：2
  • 执行（x）：1

无权限（-）对应的数字是0。权限的设置是通过组合这些数字来实现的。例如，读和执行权限的组合（r-x）对应的数字是5（4+1），读和写权限的组合（rw-）对应的数字是6（4+2）。

在Linux中，权限的设置通常遵循以下模式：

  • 第一位数字：文件所有者的权限
  • 第二位数字：文件所属组的权限
  • 第三位数字：其他用户的权限

例如，权限模式755表示：

  • 所有者（owner）：7（读、写、执行权限）
  • 组（group）：5（读、执行权限，无写权限）
  • 其他用户（others）：5（读、执行权限，无写权限）

在Linux中，还有一些特殊的权限设置：

  • 600（rw-------）：所有者有读写权限，组和其他用户无权限。
  • 644（rw-r--r--）：所有者有读写权限，组和其他用户只有读权限。
  • 666（rw-rw-rw-）：所有者有读写权限，组和其他用户也有读写权限（但通常不会同时给予）。
  • 700（rwx------）：所有者有读写执行权限，组和其他用户无权限。
  • 744（rwxr--r--）：所有者有读写执行权限，组和其他用户只有读权限。
  • 755（rwxr-xr-x）：所有者有读写执行权限，组和其他用户有读和执行权限，但无写权限。
  • 777（rwxrwxrwx）：所有者有读写执行权限，组和其他用户也有读写执行权限（但通常不会同时给予）。在实际操作中，可以使用chmod命令来设置或修改文件和目录的权限。例如：
1
chmod 755 file.txt

这个命令会将文件file.txt的权限设置为所有者可读写执行，组和其他用户可读执行。

课堂练习：

将命令和结果粘贴在桌面的release目录下，模块A提交的结果文件中。要求命令参数文件路径使用绝对路径。

  1. 建立文件夹/aaa/a01
1
mkdir -p /aaa/a01
  1. 转移到/aaa/a01目录下，并显示当前路径
1
cd /aaa/a01 && pwd
  1. 在文件夹/aaa/a01下新建文件myHadoop01.txt，内容为：Hello HadoopHello HDFSHello spark
1
2
3
4
5
cat >> /aaa/a01/myHadoop01.txt << EOF
Hello Hadoop
Hello HDFS
Hello spark
EOF
  1. 新建文件夹/bbb/b01
1
mkdir -p /bbb/b01
  1. 将文件/aaa/a01/myHadoop01.txt，复制到/bbb/b01目录下，并改名为myHadoop02.txt。
1
cp /aaa/a01/myHadoop01.txt /bbb/b01/myHadoop02.txt
  1. 在/bbb/b01/myHadoop02.txt末尾，新增加一行内容：Hello Yarn
1
echo "Hello Yarn" >> /bbb/b01/myHadoop02.txt
  1. 比较/aaa/a01/myHadoop01.txt和/bbb/b01/myHadoop02.txt的不同之处。
1
diff /aaa/a01/myHadoop01.txt /bbb/b01/myHadoop02.txt
  1. 打印/aaa/a01/myHadoop01.txt的前两行内容。
1
head -n 2 /aaa/a01/myHadoop01.txt
  1. 打印/bbb/b01/myHadoop02.txt的最后1行内容。
1
tail -n 1 /bbb/b01/myHadoop02.txt
  1. 将文件夹/aaa，拷贝为/ccc
1
cp -r /aaa /ccc
  1. 删除/ccc/a01/myHadoop01.txt文件。
1
rm -rf /ccc/a01/myHadoop01.txt
  1. 分别删除文件夹/ccc/a01，/ccc
1
2
rmdir /ccc/a01
rmdir /ccc
  1. 为文件/aaa/a01/myHadoop01.txt，建立软连接/aaa/a01/myHadoop
1
ln -s /aaa/a01/myHadoop01.txt /aaa/a01/myHadoop
  1. 用tar命令将/bbb/b01/myHadoop02.txt压缩为/bbb/b01/myHadoop02.tar.tz
1
tar -C /bbb/b01/ -czvf /bbb/b01/myHadoop02.tar.tz myHadoop02.txt
  1. 查找电脑中所有以myHadoop字符开头的文件。
1
find / -name myHadoop*
  1. 查找/aaa/a01/myHadoop01.txt中所有包含Hadoop的行。
1
grep "Hadoop" /aaa/a01/myHadoop01.txt
  1. 显示/aaa/a01/myHadoop01.txt的属性，并用文字说明该文件的文件所有者、同组用户、其他用户分别具有什么权限。
1
2
[root@MySQL01 aaa]# ll /aaa/a01/myHadoop01.txt
-rw-r--r--. 1 root root 36 1月   1 12:48 /aaa/a01/myHadoop01.txt
  • 文件所有者: 读写权限
  • 同组用户,其他用户: 读权限
  1. 用数字的方式，将myHadoop01.txt的权限设置为文件所有者可读不可写可执行，同组用户只可读，其他用户只可执行。
1
chmod 541 /aaa/a01/myHadoop01.txt
  1. 用字母的方式，将myHadoop01.txt的权限设置为一切用户均可读可写可执行。
1
chmod a=rwx /aaa/a01/myHadoop01.txt
  1. 新建用户aaa
1
useradd aaa
  1. 将文件夹/aaa的所有者设置为aaa用户，并显示/aaa的属性
1
chown aaa /aaa && stat /aaa
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Linux查找作业解析 http://blog.imc.re/archives/d40e.html 2023-11-21T01:03:53.000Z 2025-04-11T15:55:22.999Z

Linux查找作业解析

Linux 20231121 复习内容

课堂练习：

把hadoop01镜像转到20230912，并启动hadoop01，用Ubuntu进行联机。完成下面的操作，并把命令和结果截图粘贴到ubuntu桌面下的目录Release的“模块A提交的结果.docx”。要求所有命令均使用绝对路径。

  1. 在/root目录下建立子目录bbb
1
mkdir /root/bbb
  1. 在/root/bbb目录下建立文件b01.txt
1
touch /root/bbb/b01.txt

  1. 在b01.txt中插入以下内容：

    Hello HadoopHello hdfsHello sparkHello flinkHello yarnHello hbase

1
2
3
4
5
6
echo "Hello Hadoop" >> /root/bbb/b01.txt
echo "Hello hdfs" >> /root/bbb/b01.txt
echo "Hello spark" >> /root/bbb/b01.txt
echo "Hello flink" >> /root/bbb/b01.txt
echo "Hello yarn" >> /root/bbb/b01.txt
echo "Hello hbase" >> /root/bbb/b01.txt

  1. 将b01.txt拷贝为b02.txt，并在b02.txt中新增两行内容：

    Hello RedisHello clickhouse

1
2
3
cp /root/bbb/b01.txt /root/bbb/b02.txt
echo "Hello Redis" >> /root/bbb/b02.txt
echo "Hello clickhouse" >> /root/bbb/b02.txt
  1. 用diff命令比较b01.txt、b02.txt的不同之处
1
diff /root/bbb/b01.txt /root/bbb/b02.txt
  1. 用grep命令查找b01.txt中含有flink的行
1
grep flink /root/bbb/b01.txt
  1. 修改/root/bbb/b01.txt的权限：文件所有者可读可写可执行，同组用户可读可写不可执行，其他用户不可读不可写不可执行，并用ls命令查看结果
1
2
chmod 760 /root/bbb/b01.txt
ls
  1. 修改/root/bbb/b02.txt的权限：文件所有者可读不可写可执行，同组用户可读不可写不可执行，其他用户不可读不可写可执行，并用ls命令查看结果
1
2
chmod 541 /root/bbb/b02.txt
ls
  1. 用find命令查找b01.txt文件的位置
1
find / -name b01.txt
  1. 用whereis命令查找grep命令文件的位置
1
whereis grep
  1. 用tar命令将到/opt/hadoop-2.7.7.tar.gz解压到/usr/local/src下面。
1
tar -xvzf /opt/hadoop-2.7.7.tar.gz -C /usr/local/src
  1. 用find命令查找文件stop-all.sh的位置。
1
find / -name stop-all.sh

课后笔记

关于上述题目同学们有部分易错点，在此记录：

  1. 绝对路径和相对路径的概念还是不熟悉：绝对路径是以 / 开头，代表从根目录 / 开始。相对目录为 ./ 或者不加前缀。例：假设当前目录为/root ， /bbb 就是以根目录开始，与 /root 同级，如果是 aaa 或者 ./bbb 就是在当前文件夹下 /root 创建，绝对路径为 /root/aaa /root/bbb

linux files tree

  1. echo的用法掌握不熟练：echo的指令根据格式不同会有不同的功能，echo "Hello Hadoop > a.txt" 是将 a.txt 中的文件内容替换覆盖为指定内容，而 echo "Hello Hadoop >> a.txt" 是在 a.txt 中的文件末尾添加内容，区别为 > 覆盖，>> 添加，使用错误会让文件内容全部消失，切记！

  2. 创建文件命令混淆： 创建文件夹的命令为 mkdir ，创建文件的命令为 touch，一个是文件夹，一个是文件，不要搞混。如果搞混后需要删除使用如下指令：rmdir 删除文件夹，rm 删除文件

  3. 权限设置内容：可以参考：Linux chmod命令

扩展内容：

如果认为上述操作太过简单，可以参考下方扩展内容增加效率

  1. 使用 cat 命令插入多行内容（以第4题为例）：
1
2
3
4
5
6
7
8
cat >> /root/bbb/b01.txt <<EOF
Hello Hadoop
Hello hdfs
Hello spark
Hello flink
Hello yarn
Hello hbase
EOF
  1. 使用 history 命令查看历史执行指令（可以用于回滚查找操作截图，但是只有命令，没有输出）
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla 中慧1+X证书真题 http://blog.imc.re/archives/7daf.html 2023-10-31T17:44:40.000Z 2025-04-11T15:55:23.000Z

所属院校：厦门南洋职业学院

2022年Python 1+X中级考试真题(理论)

单选题

每小题2分，共60 分

1

1
Django模板的变量名在HTML中用（    ）定义。
1
A：[[   ]]
1
B：{{   }}
1
C：{  }
1
D：[  ]

答案：B

问题解析：Na

2

1
爬虫代理的可以编写为（    ）。
1
A：参数是一个序列{'类型'：'代理ip：端口号'}
1
B：参数是一个字典{'类型'：'代理ip：端口号'}
1
C：参数是一个字典{'属性'：'代理ip：端口号'}
1
D：参数是一个序列{'属性'：'代理ip：端口号'}

答案：B

问题解析：Na

3

1
关于MongoDB数据库，下列说法不正确的是（    ）
1
A：MongoDB是关系型数据库
1
B：MongoDB是一个基于分布式文件存储的数据库
1
C：MongoDB数据库中每个文档都有_id字段
1
D：MongoDB数据库支持海量数据存储

答案：A

问题解析：Na

4

1
下列关于Navicat说法，错误的是（    ）。
1
A：支持SQL Server数据库可视化管理
1
B：是一种NoSQL数据库
1
C：支持MySQL数据库可视化管理
1
D：支持MongoDB数据库可视化管理

答案：B

问题解析：Na

5

1
itempipeline的一些典型应用不包括（    ）。
1
A：验证爬取的数据（检查item包含某些分段）
1
B：将爬取结果保存到数据库中
1
C：整理HTML、CSS和JS内容
1
D：查重

答案：C

问题解析：Na

6

1
在MySQL数据库中，以下能够删除一列的是（    ）
1
A：alter table user delete age
1
B：alter table user drop column age
1
C：alter table user delete column age
1
D：alter table user remove age

答案：B

问题解析：Na

7

1
对于MySQL的一个学生表，其生日用以下哪种数据类型更合适（    ）。
1
A：DATE
1
B：DATETIME
1
C：YEAR
1
D：TIMESTAMP

答案：A

问题解析：Na

8

1
查询MySQL数据库World中的country表的前10条记录，显示“Name”、“Region”两个字段，下列正确的SQL语句是（    ）。
1
A：SELECT Name,Region FROM country LIMIT 10
1
B：SELECT * FROM WorldLIMIT 10
1
C：SELECT top 100 * FROM `country`
1
D：DELETE FROM country WHERE Name>10

答案：A

问题解析：Na

9

1
Django创建名为TestModel应用的语法是（    ）。
1
A：python manage.py makemigrations TestModel
1
B：django-admin startproject TestModel
1
C：python manage.py migrate TestModel
1
D：python manage.py startapp TestModel

答案：D

问题解析：Na

10

1
Scrapy-redis提供了四种组件，其中不包括（     ）。
1
A：Scheduler
1
B：Item Pipeline
1
C：Base Spider
1
D：Mutiple Filter

答案：D

问题解析：Na

11

1
MongoDB切换数据库的命令是（    ）
1
A：find
1
B：use
1
C：enter
1
D：select

答案：B

问题解析：Na

12

1
ORM的Models类对应于数据库的（    ）
1
A：属性
1
B：一条记录
1
C：数据表
1
D：字段

答案：C

问题解析：Na

13

1
MongoDB数据库集合的find()命令，如果未指定查询参数，则（    ）。
1
A：执行命令时会报错
1
B：读取数据库集合的所有记录
1
C：读取数据库集合的第一条记录
1
D：返回nil

答案：B

问题解析：Na

14

1
提高Selenium脚本的执行速度描述中错误的是（    ）。
1
A：优化代码
1
B：对于firefox浏览器，考虑使用测试专用的profile，因为每次启动浏览器的时候firefox会创建1个新的profile，对于这个新的profile，所有的静态资源都是从服务器直接下载，而不是从缓存里加载，这就导致网络不好的时候用例运行速度特别慢的问题
1
C：使用更高配置的电脑和选择更快的网络环境
1
D：可以随便加sleep，使用显式等待

答案：D

问题解析：Na

15

1
Selenium中没有提供原生的方法判断元素是否存在，一般我们可以通过（    ）判断。
1
A：定位元素+异常捕获
1
B：定位属性+非空
1
C：定位元素+非空
1
D：定位属性+异常捕获

答案：A

问题解析：Na

16

1
一般网站从三个方面反爬虫，其中不包括（    ）。
1
A：用户行为
1
B：网站目录和数据加载方式
1
C：用户点击网页
1
D：用户请求的Headers

答案：C

问题解析：Na

17

1
SELECT语句的完整语法比较复杂，但至少包含以下哪个部分（    ）
1
A：SELECT，GROUP
1
B：SELECT，INTO
1
C：SELECT，FROM
1
D：仅SELECT

答案：C

问题解析：Na

18

1
MySQL数据库中，以下聚合函数求数据总和的是（    ）。
1
A：AVG
1
B：COUNT
1
C：MAX
1
D：SUM

答案：D

问题解析：Na

19

1
MySQL数值型数据类型中有符号TINYINT的范围是（    ）。
1
A：(0，255)
1
B：(-128，127)
1
C：(0，65 535)
1
D：(-32 768，32 767)

答案：B

问题解析：Na

20

1
当生成一个spider继承redisspider时，会调用setup_redis函数，这个函数回去连接redis数据库，然后会设置（    ）。
1
A：response
1
B：singals信号
1
C：token信令
1
D：request请求

答案：B

问题解析：Na

21

1
反爬虫应对策略不包含下列哪项？(    )。
1
A：反爬虫自己会好的
1
B：设置延迟爬虫sleep()
1
C：更换爬虫IP
1
D：添加headers信息

答案：A

问题解析：Na

22

1
向一个尚不存在的MongoDB数据库集合执行插入文档操作，下列说法正确的是（    ）。
1
A：返回false
1
B：插入成功，自动创建集合
1
C：返回nil
1
D：导致报错

答案：B

问题解析：Na

23

1
MongoDB命令dB. CollectionName.remove({key:value}, {justOne})的作用是（    ）。
1
A：删除集合CollectionName下的一条文档
1
B：查询集合CollectionName下的一条文档，并移动到justOne集合中
1
C：删除名为CollectionName的集合
1
D：删除集合CollectionName下的所有文档

答案：A

问题解析：Na

24

1
Django请求对象属性中用于获取当前请求方式的关键字是（    ）
1
A：path
1
B：body
1
C：method
1
D：POST

答案：C

问题解析：Na

25

1
要启用spider中间件，您可以将其加入到 SPIDER_MIDDLEWARES 设置中。该设置是一个（    ），键为中间件的路径，值为中间件的顺序(order)。
1
A：堆栈
1
B：item
1
C：字典
1
D：队列

答案：C

问题解析：Na

26

1
元素找不到可能的原因不包括（    ）。
1
A：动态id定位不到元素
1
B：在同一个iframe中查找元素
1
C：xpath描述错误
1
D：iframe原因定位不到元素

答案：B

问题解析：Na

27

1
MongoDB服务器默认端口是（    ）
1
A：27017
1
B：8080
1
C：6379
1
D：3306

答案：A

问题解析：Na

28

1
以下哪个不属于Scrapy框架的优点？（    ）。
1
A：它由Spiders、ItemPipeline、Downloader、Scoop组成
1
B：它更容易构建大规模的抓取项目
1
C：它异步处理请求，速度非常快
1
D：它可以使用自动调节机制自动调整爬行速度

答案：A

问题解析：Na

29

1
使用“CREATE TABLE”语句创建MySQL数据库的表，下列说法正确的是（    ）
1
A：如果指定创建的表已经存在，则SQL语句执行失败
1
B：不能在两个不同的数据库里创建相同名称的表
1
C：创建数据库表时，不能指定主键
1
D：如果指定创建的表已经存在，则覆盖原有表

答案：A

问题解析：Na

30

1
SQL语句中的条件查询用以下拿一项（    ）
1
A：THEN
1
B：WHERE
1
C：WHILE
1
D：IF

答案：B

问题解析：Na

多选题

每小题2分，共20 分

1

1
如果AppModel是一个Django模型类，则修改数据的方法正确的有（    ）。
1
2
3
A：a1 = AppModel.objects.get(id=1)
a1.name = ‘zhangsan’
a1.save()
1
B：AppModel.objects.all().modify(name=’abc’)
1
C：AppModel.objects.all().update(name=’wangwu’)
1
D：AppModel.objects.filter(id=1).update(name=’lisi’)

答案：A,C,D

问题解析：Na

2

1
以下对Django MVT模式解释正确的是（）
1
A：V全拼为View，用于模本渲染，生成页面展示的HTML内容。
1
B：M全拼为Model，与MVC中的M功能相同，负责和数据库交互。
1
C：V全拼为View，与MVC中的C功能相同，接收请求，返回响应。
1
D：T全拼为Template，与MVC中的V功能相同，负责封装构造渲染需要返回的HTML页面。

答案：B,C,D

问题解析：Na

3

1
下列关于xpath表达式描述正确的有（）
1
A：//title[@lang = 'en'] 选取拥有lang属性并且值为‘en’的所有title元素。
1
B：//bookstore/book[position()<3] 选取最前面的三个属于bookstore元素的子元素的book元素。
1
C：//bookstore/book[last()-1] 选取属于bookstore子元素的倒数第二个book元素。
1
D：//bookstore/book[1] 选取属于bookstore子元素的第二个book元素。

答案：A,C

问题解析：Na

4

1
关于Django中的redirect()的参数可以是（    ）。
1
A：一个绝对的或相对的URL，将原封不动的作为重定向的位置
1
B：一个视图，可以带有参数：将使用urlresolvers.reverse 来反向解析名称
1
C：一个元组，元组内是一系列URL
1
D：一个列表，列表内存放的是一系列的URL

答案：A,B

问题解析：Na

5

1
关于Django路由中的path()和re_path()函数的描述正确的是（    ）。
1
A：path()函数如果手动添加正则首位限制符号也可用于正则路径
1
B：path()函数用于普通路径
1
C：path()函数和Django 1.1.x版本的url()函数用法相同
1
D：re_path()函数用于正则路径

答案：B,D

问题解析：Na

6

1
Django模板取值的方法正确的是（    ）。
1
A：在模板中取出列表某个元素可以使用下标
1
B：视图可以传递列表，在模板中可以直接显示列表
1
C：视图可以传递字典，在模板中可以直接显示字典
1
D：在模板中可以通过字典的键得到相应的值

答案：A,B,C,D

问题解析：Na

7

1
关于Django中的HttpRequest对象的属性，错误的是（    ）。
1
A：POST包含所有HTTP POST参数的列表对象
1
B：GET包含所有HTTP GET参数的列表对象
1
C：body表示请求体。
1
D：method属性返回请求中使用的HTTP方法的字符串表示，全大写表示

答案：A,B

问题解析：Na

8

1
ORM和数据库的对应关系正确的是（    ）。
1
A：方法对应字段
1
B：对象实例对应一条记录
1
C：Models类对应数据表
1
D：属性对应字段

答案：B,C,D

问题解析：Na

9

1
创建Django项目后，其中的文件的意义描述正确的有（    ）。
1
A：settings.py 为Django项目的配置文件，里面包含了项目引用的Django组件、项目名等。
1
B：urls.py为路由系统，主要维护项目的URL路由映射，即定义客户端访问的URL
1
C：__init__.py告诉Python该目录是一个Python模块，创建后暂无内容
1
D：wsgi.py定义WSGI的接口信息，用于与其他Web服务器集成，一般无需改动

答案：A,B,D

问题解析：Na

10

1
对requests库描述正确的是（）
1
A：任何类型的请求都可以通过requests.get()获取数据
1
B：使用requests.post()发送请求时可以通过data参数传递请求数据
1
C：可以使用requests.get()发送GET请求
1
D：使用requests.get()发送请求时可以通过data参数传递请求数据

答案：B,C

问题解析：Na

判断题

每小题2分，共20 分

1

1
Django的视图函数至少要有一个参数用来接收请求对象（    ）

正确

错误

答案：正确

问题解析：Na

2

1
MongoDB是一个基于分布式文件存储的数据库。是由C++语言编写（    ）

正确

错误

答案：正确

问题解析：Na

3

1
我们使用requests库发送post请求的时候，可以通过params关键字传递参数（    ）

正确

错误

答案：错误

问题解析：Na

4

1
Django是Python的一个Web开发框架，底层是基于C语言实现的。（    ）

正确

错误

答案：错误

问题解析：Na

5

1
Django在创建应用后需要将应用注册到项目中，才能将应用中的模型类映射为数据表（    ）

正确

错误

答案：正确

问题解析：Na

6

1
构建Django模型时需要在settings.py文件中修改DATABASE的配置项，里面加上数据库引擎、数据主机、用户、密码等。（    ）

正确

错误

答案：正确

问题解析：Na

7

1
在Scrapy项目中，我们可以通过yield关键字将item对象传递到管道，然后对数据进行持久化存储（    ）

正确

错误

答案：正确

问题解析：Na

8

1
我们可以使用Scrapy-Redis框架实现分布式爬虫，大规模的采集数据，但它的缺点是数据只能保存到Redis中，不能保存到MySQL中（    ）

正确

错误

答案：错误

问题解析：Na

9

1
我们在开发中大量采用MySQL数据库的原因是因为它是基于内存的数据库，效率高，速度快（    ）

正确

错误

答案：错误

问题解析：Na

10

1
Django MVT架构模式中的V指的是View，它的作用是渲染HTML内容，让用户能够看到一个美观的页面（    ）

正确

错误

答案：错误

问题解析：Na

]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla 中慧1+X证书题库 http://blog.imc.re/archives/260d.html 2023-10-31T16:59:10.000Z 2025-04-11T15:55:23.000Z

所属院校：厦门南洋职业学院

Python程序开发模拟卷(中级1120)

单选题

每小题2分，共60 分

1

1
提高Selenium脚本的执行速度描述中错误的是（    ）。
1
A：使用更高配置的电脑和选择更快的网络环境
1
B：对于firefox浏览器，考虑使用测试专用的profile，因为每次启动浏览器的时候firefox会创建1个新的profile，对于这个新的profile，所有的静态资源都是从服务器直接下载，而不是从缓存里加载，这就导致网络不好的时候用例运行速度特别慢的问题
1
C：优化代码
1
D：可以随便加sleep，使用显式等待

答案：D

问题解析：Na

2

1
删除Redis当前数据库的命令为（    ）。
1
A：FLUSHALL
1
B：DB. Remove
1
C：DB. Drop
1
D：FLUSHDB

答案：D

问题解析：Na

3

1
Django在视图中将数据传递给模板可以通过哪种方式（    ）。
1
A：return render(request,"xxx.html", {key: value})
1
B：return render(request,"xxx.html", “name”)
1
C：return render(request,"xxx.html", 20)
1
D：return render(request,"xxx.html", [1, 2, 3])

答案：A

问题解析：Na

4

1
Django创建名为TestModel应用的语法是（     ）。
1
A：python manage.py makemigrations TestModel
1
B：python manage.py startapp TestModel
1
C：django-admin startproject TestModel
1
D：python manage.py migrate TestModel

答案：B

问题解析：Na

5

1
以下操作不可以应对反爬的是(    )。
1
A：发送请求之后加上time.sleep(random.randint(1, 2))
1
B：requests.get()函数中为headers参数设置合理的User-Agent
1
C：一台计算机上开启多线程加快发送请求的速度
1
D：requests.get()函数中为proxies设置合适的代理

答案：C

问题解析：Na

6

1
MySQL字符数据类型不包括(    )。
1
A：TINYBLOB
1
B：CHAR
1
C：VARCHAR
1
D：BIGBLOB

答案：D

问题解析：Na

7

1
ORM是指（    ）。
1
A：对象、联系、模型
1
B：关系、对象、模型
1
C：映射、对象、联系
1
D：对象、关系、映射

答案：D

问题解析：Na

8

1
以下属于pymongo删除数据方法的是(    )。
1
A：delete_all()
1
B：drop_one()
1
C：delete_one()
1
D：drop_many()

答案：C

问题解析：Na

9

1
查询MySQL数据库World中的country表的前10条记录，显示“Name”、“Region”两个字段，下列正确的SQL语句是（    ）。
1
A：SELECT Name,Region FROM country LIMIT 10
1
B：DELETE FROM country WHERE Name>10
1
C：SELECT * FROM WorldLIMIT 10
1
D：SELECT top 100 * FROM `country`

答案：A

问题解析：Na

10

1
假如Student是一个Django模型类，利用该模型类删除数据的操作错误的是(    )。
1
A：Student.objects.all().delete()
1
B：Student.objects.filter(id=1).delete()
1
C：Student.objects.query_all().delete()
1
2
D：stu=Student.objects.get(id=1)
stu.delete()

答案：C

11

1
关于Redis的Hash的说法错误的是(    )。
1
A：HSET可设置字典的一个键值对
1
B：HDROP可用于删除键
1
C：HGETALL可获取字典的所有键值对
1
D：Hash是Redis的一种字典存储数据结构，一个Hash对象可以存储多个键-值对元素，底层由哈希表实现

答案：B

问题解析：Na

12

1
关于Selenium键盘操作，描述错误的是（    ）。
1
A：send_keys(Keys.BACK_SPACE)表示删除键
1
B：send_keys(Keys.ENTER)表示回车键
1
C：send_keys(Keys.CONTROL，'c')表示复制
1
D：send_keys(Keys.ESCAPE)表示空格键

答案：D

问题解析：Na

13

1
现有一个stuinfo表,其中包含name(VARCHAR)、gender(INT)、birthday(DATE)、address(VARCHAR)、class(INT)几个字段，以下插入语句正确的是(    )。
1
A：NSERT INTO stuinfo VALUES ('chen',1,'1999-5-1','北京市西直门大街123号',5);
1
B：NSERT INTO stuinfo VALUES ('chen',1,'1999-5-1','北京市西直门大街123号');
1
C：NSERT INTO stuinfo (name,sex,birthday,address) VALUES ('chen', 1, 1999-5-1, '北京市西直门大街123号', 5);
1
D：NSERT INTO stuinfo (name,sex,birthday,address,class) VALUES ('chen',1,'1999-5-1',5);

答案：A

问题解析：Na

14

1
Selenium中获取页面相关信息的描述，不正确的是(    )。
1
A：元素的get_attribute()方法可以获取元素的属性值
1
B：元素的text属性可以获取元素的文本信息
1
C：元素的title属性可以获取网页标题
1
D：元素得到size属性可以获取元素的尺寸

答案：C

问题解析：Na

15

1
在Scrapy项目中创建爬虫的命令是（    ）。
1
A：scrapy genspider 爬虫名 网页域名
1
B：scrapy genspider 爬虫名 网页的URL
1
C：scrapy startspider 爬虫名 网页域名
1
D：scrapy startspider 爬虫名 网页的URL

答案：A

问题解析：Na

16

1
SQL是以下哪三个单词的缩写(    )。
1
A：Selected Quiet Language
1
B：Structured Query Language
1
C：Structured Quiet Language
1
D：Selected Query Language

答案：B

问题解析：Na

17

1
关于Redis的说法，错误的是（    ）。
1
A：Redis服务端程序为redis-server.exe
1
B：启动Redis可以通过CMD命令和手动方式启动
1
C：可发送PING命令测试服务器，正常服务器回复OK
1
D：Redis客户端程序为redis-cli.exe

答案：C

问题解析：Na

18

1
scrapy-Redis分布式策略中，爬虫继承了RedisSpider，它能够支持分布式的抓取，采用的是basic spider，需要写parse函数。其次就是不再有start_urls了，取而代之的是（    ）。
1
A：redis_key
1
B：scheduler
1
C：key-values
1
D：setting

答案：A

问题解析：Na

19

1
Redis数据库中一个字符串类型的值能存储最大容量是多少(    )。
1
A：128M
1
B：64M
1
C：512M
1
D：256M

答案：C

问题解析：Na

20

1
Django请求对象属性中用于获取当前请求方式的关键字是（    ）
1
A：method
1
B：POST
1
C：path
1
D：body

答案：A

问题解析：Na

21

1
关于Redis说法，不正确的是（    ）。
1
A：速度快
1
B：单线程操作
1
C：基于内存存储
1
D：不支持键-值对数据存储

答案：D

问题解析：Na

22

1
Scrapy框架基于管道的持久化存储流程，描述有误的是哪项(    )。
1
A：爬虫文件抓取到数据后，将数据封装到items对象中
1
B：settings.py中开启管道
1
C：使用return将items对象交给pipelines管道进行持久化操作
1
D：管道文件中使用process_item方法将爬虫文件提交过来的item对象数据进行持久化存储

答案：C

问题解析：Na

23

1
MongoDB数据库操作错误的是(    )。
1
A：show databases 可以显示数据库
1
B：use 数据库名 可以切换数据库，但不能切换到一个不存在的数据库
1
C：show dbs 可以显示数据库
1
D：db.dropDatabase()可以删除数据库

答案：B

问题解析：Na

24

1
SQL语言中数据定义语言DDL中包括哪个语句（    ）。
1
A：grant
1
B：select
1
C：DROP
1
D：DELETE

答案：C

问题解析：Na

25

1
Django模板中单行注释语法为(    )。
1
A：//
1
B：/*  */
1
C：#
1
D：{# ... #}

答案：D

问题解析：Na

26

1
关于Django路由反向解析的说法错误的是（    ）。
1
A：在模板 templates 中的 HTML 文件中，利用 {% "路由别名" %} 反向解析，如：<form action="{% 'login' %}" method="post">
1
B：在 views.py 中，从 django.urls 中引入 reverse，利用 reverse("路由别名") 反向解析，如：return redirect(reverse("login"))
1
C：在urls.py中给路由起别名，name=”路由别名”，如：path("login1/", views.login, name="login")
1
D：反向解析，开发者可以增加代码的可维护性，使用URL反向解析使得开发者在许多需要写URL绝对路径的地方用映射名来代替

答案：A

问题解析：Na

27

1
MySQLdb连接数据库的语法为bObj=MySQLdB. connect(ServerName,User,PWD,DbName,charset=CharsetName)，以下关于它的描述错误的是（    ）。
1
A：DbName表示表名
1
B：ServerName表示服务器名
1
C：PWD表示密码
1
D：User表示用户名

答案：A

问题解析：Na

28

1
进入Django项目的交互式环境的命令是(    )。
1
A：python manage.py runserver
1
B：python manage.py shell
1
C：python manage.py makemigrations
1
D：python manage.py migrate

答案：B

问题解析：Na

29

1
向一个尚不存在的MongoDB数据库集合执行插入文档操作，下列说法正确的是（    ）。
1
A：返回false
1
B：导致报错
1
C：返回nil
1
D：插入成功，自动创建集合

答案：D

问题解析：Na

30

1
Scrapy中Downloader Middleware的核心方法不包括（    ）。
1
A：process_response(request，response，spider)
1
B：process_spider(request，spider)
1
C：process_request(request，spider)
1
D：process_exception(request，exception，spider)

答案：B

问题解析：Na

多选题

每小题2分，共20 分

1

1
关于Django路由中的path()和re_path()函数的描述正确的是（    ）。
1
A：path()函数和Django 1.1.x版本的url()函数用法相同
1
B：path()函数用于普通路径
1
C：re_path()函数用于正则路径
1
D：path()函数如果手动添加正则首位限制符号也可用于正则路径

答案：B,C

问题解析：Na

2

1
如果AppModel是一个Django模型类，则删除数据的方法正确的有（    ）。
1
A：AppModel.objects.filter(id=1).delete()
1
2
B：a1 = AppModel.objects.get(id=1)
a1.delete()
1
C：AppModel.objects.delete()
1
D：AppModel.objects.all().delete()

答案：A,B,D

3

1
下列哪些列类型是MySQL数值型的数据(    )。
1
A：DOUBLE
1
B：FLOAT
1
C：INT
1
D：SET

答案：A,B,C

问题解析：Na

4

1
以下Django框架的描述正确的有（    ）。
1
A：免费开源
1
B：集成了众多功能强大的模块
1
C：Django诞生于2003年，是目前Python语言影响力最高和最成熟的网络框架
1
D：开发效率高

答案：A,B,C,D

问题解析：Na

5

1
关于MongoDB的说法，正确的是（    ）。
1
A：由C++编写
1
B：提供可扩展的高性能数据存储解决方法
1
C：是一种基于分布式文件的开源数据库系统
1
D：可添加节点保证服务器性能

答案：A,B,C,D

问题解析：Na

6

1
关于Scrapy项目中的文件的描述正确的是（    ）。
1
A：pipelines.py：数据处理文件，对爬取到的数据进行处理保存等
1
B：settings.py：项目配置文件。定义了项目设置文件路径、部署信息等内容
1
C：items.py：定义Item数据结构的文件。在此可以编写所有的Item数据定义
1
D：scrapy.cfg：项目设置文件，可以定义项目的全局设置，比如USER_AGENT，ROBOTSTXT_OBEY等

答案：A,C

问题解析：Na

7

1
MySQL中关于模糊查询的说法正确的是（    ）。
1
A：由于模糊查询具有极大的便利性，因此在SQL中应推荐使用
1
B：‘张%’表示以‘张’开头的记录
1
C：可以使用LIKE关键字
1
D：‘_德_’表示三个字且中间为‘德’的记录

答案：B,C,D

问题解析：Na

8

1
Navicat支持哪些数据库的可视化管理（    ）。
1
A：Oracle
1
B：MySQL
1
C：MongoDB
1
D：SQL Server

答案：A,B,C,D

问题解析：Na

9

1
关于Django视图的描述正确的是（    ）。
1
A：视图函数可以查询数据库
1
B：一个视图函数（类），简称视图，就是一个Python函数
1
C：视图函数render方法不能向页面发送响应数据
1
D：视图函数接受Web请求并返回Web响应

答案：A,B,D

问题解析：Na

10

1
关于Redis命令，正确的是（    ）。
1
A：DBCOUNT 命令用于查看当前数据库的记录数
1
B：SELECT命令用于选择数据库
1
C：GET KeyName，其中KeyName为键名，返回当前参数KeyName的值，如果指定KeyName不存在，则返加nil
1
D：SET KeyName Value命令表示将值存储在当前数据库中

答案：B,C,D

问题解析：Na

判断题

每小题2分，共20 分

1

1
通过CMD命令行启动MySQL服务的命令为start xxx, xxx表示安装过程中配置的MySQL服务名。（    ）

正确

错误

答案：错误

问题解析：Na

2

1
由于Redis是内存数据库，因此它不支持数据的持久化存储。（    ）

正确

错误

答案：错误

问题解析：Na

3

1
Scrapy项目中运行爬虫的命令为scrapy start 爬虫名字。（    ）

正确

错误

答案：错误

问题解析：Na

4

1
Selenium是一个爬虫框架，让浏览器自动加载页面，获取需要的数据，甚至页面提交，后来又应用于Web自动化测试。（    ）

正确

错误

答案：错误

问题解析：Na

5

1
mongo.exe是MongoDB的客户端程序，在命令行执行mongo命令即可启动MongoDB客户端。（    ）

正确

错误

答案：正确

问题解析：Na

6

1
在使用多线程的过程中，为了解决全局变量冲突问题，可以通过Lock加锁。（    ）

正确

错误

答案：正确

问题解析：Na

7

1
Django中path()函数可以用于正则路径。（    ）

正确

错误

答案：错误

问题解析：Na

8

1
HttpRequest 对象的path属性可以获取URL中的路径部分，数据类型是字符串。（    ）

正确

错误

答案：正确

问题解析：Na

9

1
MySQL数据库在集群技术、高可用性、安全性、系统管理等方面都有较好性能表现，支持跨平台运行，是目前大型高性能商务数据库的首选。（    ）

正确

错误

答案：错误

问题解析：Na

10

1
Django中的模板变量名必须有字母、数字、下划线和点组成，可以以字母、数字和下划线开头。（    ）

正确

错误

答案：错误

问题解析：Na

]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla kafka安装文档 http://blog.imc.re/archives/kafka.html 2023-10-24T14:26:40.000Z 2025-04-11T15:55:22.999Z
  1. 关闭防火墙
1
systemctl stop firewalld
  1. 需安装Zookeeper组件具体要求同Zookeeper任务要求，并与Kafka环境适配，启动Zookeeper并截图保存结果：
  • 在master，slave1，slave2分别启动zookeeper
1
zkServer.sh start
  • 查询3台机器的zookeeper启动状态
1
zkServer.sh status
  • zookeeper 配置文件 /opt/software/zookeeper/conf/zoo.cfg ，数据文件夹设置为 /opt/software/zookeeper/zkdata，zoo.cfg 需要和 kafka 的 zookeeper.properties 适配
1
vi /opt/module/zookeeper/conf/zoo.cfg

需要查看的配置内容:

1
2
3
4
5
dataDir=/opt/module/zookeeper/zkdata
clientPort=2181
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
  1. 解压kafka安装包到 /opt/module 路径,并修改解压后文件夹名为 kafka ,截图并保存结果:
1
2
tar -xvzf /opt/software/kafka1.0.0.tar.gz -C /opt/module
mv /opt/module/kafka_2.11-1.0.0 /opt/module/kafka
  1. 设置kafka环境变量, 并使环境变量只对当前root用户生效，截图并保存结果:
1
vi /root/.bash_profile

添加以下内容:

1
2
export KAFKA_HOME=/opt/module/kafka
export PATH=$PATH:$KAFKA_HOME/bin

刷新生效:

1
source /root/.bash_profile
  1. 修改kafka相应文件, 截图并保存结果:
  • 在 master 上修改文件zookeeper.properties
1
vi /opt/module/kafka/config/zookeeper.properties

配置文件内容:

1
2
3
4
5
clientPort=2181
dataDir=/opt/module/kafka/data
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888

在kafka安装文件夹中建立 data 文件夹,与 dataDir=/opt/module/kafka/data 对应

1
2
mkdir /opt/module/kafka/data
vi /opt/module/kafka/data/myid
  • 在 master 上修改 server.properties
1
vi  /opt/module/kafka/config/server.properties

修改以下内容:

1
2
3
4
5
broker.id=0
listeners=PLAINTEXT://192.168.152.240:9092
advertised.listeners=PLAINTEXT://192.168.152.240:9092
log.dirs=/usr/local/src/kafka/data
zookeeper.connect=192.168.152.240:2181,192.168.152.241:2181,192.168.152.242:2181

文件分发:

1
2
3
4
scp -r /opt/module/kafka slave1:/opt/module
scp -r /opt/module/kafka slave2:/opt/module
scp /root/.bash_profile slave1:/root
scp /root/.bash_profile slave2:/root

在其他节点刷新变量文件生效:

1
source /root/.bash_profile
  • 在 slave1 上修改 myid 文件为 2
1
2
3
cat>/opt/module/kafka/data/myid<<EOF
2
EOF

修改 server.properties 文件为以下内容:

1
2
3
4
broker.id=1
listeners=PLAINTEXT://192.168.152.241:9092
advertised.listeners=PLAINTEXT://192.168.152.241:9092
log.dirs=/usr/local/src/kafka/data zookeeper.connect=192.168.152.240:2181,192.168.152.241:2181,192.168.152.242:2181

在 slave2 上修改 myid 文件为 3

1
2
3
cat>/opt/module/kafka/data/myid<<EOF
3
EOF

修改 server.properties 文件为以下内容:

1
2
3
4
broker.id=1
listeners=PLAINTEXT://192.168.152.242:9092
advertised.listeners=PLAINTEXT://192.168.152.242:9092
log.dirs=/usr/local/src/kafka/data zookeeper.connect=192.168.152.240:2181,192.168.152.241:2181,192.168.152.242:2181
  1. 启动 kafka 并保存命令输出结果, 截图并保存结果:

分别在master, slave1, slave2 上执行

1
2
3
kafka-server-start.sh -daemon /opt/module/kafka/config/server.properties

jps

输出以下内容为正常启动:

1
2
3
2198 QuorumPeerMain
6732 Jps
3758 Kafka
  1. 创建指定topic, 截图并保存结果:
1
kafka-topics.sh --zookeeper master01:2181,slave01:2181,slave02:2181 --create --partitions 3 --replication-factor 3 --topic test

输出以下内容为正常启动:

1
Created topic "test-topic".
  1. 查看所有topic信息, 并截图保存结果:
1
kafka-topics.sh --list --zookeeper master01:2181

输出:

1
test
1
kafka-topics.sh -zookeeper master01:2181,slave01:2181,slave02:2181 --describe --topic test

输出:

1
2
3
4
Topic:test-topic     PartitionCount:3   ReplicationFactor:3      Configs:
      Topic: test-topic    Partition: 0 Leader: 1   Replicas: 1,2,0      Isr: 1,0
      Topic: test-topic    Partition: 1 Leader: 2   Replicas: 2,0,1      Isr: 2,0,1
      Topic: test-topic    Partition: 2 Leader: 0   Replicas: 0,1,2      Isr: 0,1
  1. 启动指定生产者(producer), 并截图保存结果:

注意: 控制台发送者的broker-list的ip需要与server.properties中listeners处的一致, 控制台消费者就能接收到消息

1
kafka-console-producer.sh --broker-list 192.168.152.240:9092 --topic test
  1. 启动消费者(sonsumer), 并截图保存结果:

再开启一个master连接, 输入:

1
kafka-console-consumer.sh --bootstrap-server 192.168.152.240:9092 --topic test

注: kafka旧版本连接服务器的参数为 --zookeeper , 新版为 --bootstrap-server

输出:

1
Using the ConsoleConsumer with old consumer is deprecated and will be removed in a future major release. Consider using the new consumer by passing [bootstrap-server] instead of [zookeeper]
  1. 测试生产者(producer), 并截图保存结果:
1
kafka-console-producer.sh --broker-list 192.168.152.240:9092 --topic test
1
2
3
4
5
6
7
8
9
[root@master01 ~]# kafka-console-producer.sh --broker-list 192.168.152.240:9092 --topic test
>111
>222
>333
>444
>555
>666
>777
>888
  1. 测试消费者(consumer), 并截图保存结果

消费者上显示:

1
2
3
4
5
6
7
8
9
Using the ConsoleConsumer with old consumer is deprecated and will be removed in a future major release. Consider using the new consumer by passing [bootstrap-server] instead of [zookeeper].
111
222
333
444
555
666
777
888

基于命令行方式使用kafka

1.  三台机器上启动zookeeper
zkServer.sh start

2.  三台机器上启动kafka服务

1
kafka-server-start.sh -daemon /usr/local/src/kafka/config/server.properties

3.  查看进程

1
jps

4.  创建主题

1
2
3
4
5
kafka-topics.sh --create \  
--topic itcasttopic \  
--partitions 3 \  
--replication-factor 2 \  
--zookeeper master01:2181,slave01:2181,slave02:2181

5.  创建生产者，来生产消息。在master01上输入

1
2
3
kafka-console-producer.sh \  
--broker-list master01:9092,slave01:9092,slave02:9092 \  
--topic itcasttopic

6.  创建消费者，来消费消息。在slave01上输入

1
2
3
kafka-console-consumer.sh \  
--from-beginning \  
--topic itcasttopic

测试消费者（consumer）（kafka2.11-2.0.0命令有所不同）

1
2
3
4
kafka-console-consumer.sh \  
--from-beginning \  
--topic test \  
--bootstrap-server 192.168.152.245:9092
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla zookeeper安装文档 http://blog.imc.re/archives/zookeeper.html 2023-10-24T14:26:40.000Z 2025-04-11T15:55:23.000Z
  1. 关闭防火墙
1
2
3
4
5
6
7
8
# 禁用防火墙
systemctl disable firewalld

# 关闭防火墙
systemctl stop firewalld

# 再次查看防火墙状态
systemctl status firewalld
  1. 查看主机名称
1
hostname
  1. 解压zookeeper
1
2
3
tar -xvzf /opt/software/zookeeper-3.4.5.tar.gz -C /opt/module

mv /opt/module/zookeeper-3.4.5 /opt/module/zookeeper
  1. 修改zookeeper配置文件
1
2
3
cp /opt/module/zookeeper/conf/zoo_simple.cfg /opt/module/zookeeper/conf/zoo.cfg

vi /opt/module/zookeeper/conf/zoo.cfg

修改以下内容:

1
2
3
4
5
6
7
# 修改 dataDir 路径
dataDir=/opt/module/zookeeper/zkdata

# 文件末尾添加服务器
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
  1. 创建 dataDir 设置的目录和 myid 文件
1
2
3
4
5
mkdir /opt/module/zookeeper/zkdata

cat > /opt/module/zookeeper/zkdata/myid << EOF
1
EOF
  1. 配置环境变量
1
vi /root/.bash_profile

文件结尾插入以下内容:

1
2
export ZK_HOME=/opt/module/zookeeper
export PATH=$PATH:$ZK_HOME/bin

刷新文件生效:

1
source /root/.bash_profile
  1. 分发 zookeeper 相关文件和环境变量到slave1 slave2
1
2
3
4
scp -r /opt/module/zookeeper slave1:/opt/module
scp -r /opt/module/zookeeper slave2:/opt/module
scp -r /root/.bash_profile slave1:/root
scp -r /root/.bash_profile slave2:/root

在其他节点shell终端上刷新环境变量以生效

1
source /.bash_profile
  1. 更改 slave1 和 slave2 的 myid 文件内容为 2 和 3
1
2
3
cat > /opt/module/zookeeper/zkdata/myid << EOF
2
EOF
1
2
3
cat > /opt/module/zookeeper/zkdata/myid << EOF
3
EOF
  1. 分别在三台机子上启动 zookeeper
1
zkServer.sh start
  1. 查看启动状态
1
zkServer.sh status

输出类似下方内容即为启动正常

1
2
3
JMX enabled by default
Using config: /usr/local/src/zookeeper/bin/../conf/zoo.cfg
Mode: follower
  1. 进入 zkshell
1
zkCli.sh -server localhost:2181
  1. 退出
1
quit
  1. 停止 zk 服务
1
zkServer.sh stop
]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla hadoop安装竞赛文档 http://blog.imc.re/archives/1385.html 2023-10-11T14:26:40.000Z 2025-04-11T15:55:22.999Z

Hadoop安装教程

仅供厦门南洋学院的同学参考使用，基于厦门南洋学院实训楼413的环境进行配置，无法保证能够应用到其他场景。

  • 编纂时间：2023.10.11
  • 编纂作者：夏五郎

Linux入门教程

在linux下安装hadoop必须要会的几个基本操作：

  • cd 目录 # 切换目录的命令使用 cd 命令可以切换目录，比如 cd $MP 就是打开$MP 目录。其中在目录前添加 ./module或不加任何标记 module 表示当前目录，添加 ../module 表示上级目录 ，/module 表示从根目录 / 开始的绝对路径目录。

  • vi 文件目录 # 在命令行中使用编辑器的命令使用 vi 命令可以在shell中编辑文件，比如 vi /etc/hosts 就是编辑/etc/hosts文件。文件目录的标注方法和cd同样，不存在的文件会直接新建，请注意！使用方向键移动光标，点击 i 键，最下方显示 INSERT 后进入编辑模式点击 Esc 键，然后输入 :wq可以保存文件并退出，其中q表示退出，w表示保存

  • tar # 解压文件的命令使用tar命令可以压缩/解压文件，hadoop配置中只用到了解压文件，这里给出解压文件的示例命令，其他参数请自行tar --help 或者bing查看。

    1
    2
    3
    tar -xvzf 压缩目录文件 -C 解压到的目录
    # 例子：
    tar -xvzf /opt/jdk-8u162-linux-x64.tar.gz -C $MP

    其中 /opt/jdk-8u162-linux-x64.tar.gz 是压缩文件所在文件路径，$MP 是要解压到的文件目录

  • ip #命令使用 ip a 命令可以查看服务器的IP地址，输出一般为这样：

1
2
3
4
5
6
7
8
9
10
11
12
13
  [root@master ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 00:0c:29:56:e9:74 brd ff:ff:ff:ff:ff:ff
    inet 192.168.152.81/24 brd 192.168.152.255 scope global noprefixroute ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::6a9a:2e8:734b:def2/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever

其中 192.168.152.81就是该服务器的ip地址，要学会去看其他节点服务器的ip地址，以便连接操作。

  • ssh #连接服务器命令使用 ssh 命令可以连接其他节点服务器，连接命令为：
1
2
3
ssh root@192.168.152.81 #root是连接用户名，192.168.152.81是要连接的服务器ip地址。
root@192.168.152.81's password: #显示这个后输入密码
[root@master ~]# 显示这个代表成功连接

小贴士

  • 在敲命令的过程中可以使用 TAB 键补全命令哦~
  • 可以使用方向键的 ↑ ↓ 键切换到上次执行的命令
  • 使用 ssh root@192.168.152.81 "command" 指令即可远程执行 command 指令，前提是配置了密钥连接哦。

Hadoop安装流程

一，配置服务器基本环境

需要在本板块将服务器所需模块以及其他配置文件弄好，以便后续的配置

  1. 在ubuntu中连接hadoop01，将hadoop01作为master节点进行配置：
1
2
3
4
ssh root@192.168.152.81 
#打开终端，输入上述命令进行连接，root是连接用户名，192.168.152.81是要连接的服务器ip地址。
root@192.168.152.81's password: #显示这个后输入密码
[root@server-1 ~]# 显示这个代表成功连接

如果无法连接说明IP地址更改了，请自行查看！

  1. 设置master主机名称和host文件，便于连接
1
2
3
4
5
6
7
8
9
# 设置主机名
hostnamectl set-hostname master

# 在/etc/hosts文件里插入master和其他节点的ip和域名id
cat>>"/etc/hosts"<<EOF
192.168.152.81 master
192.168.152.101 slave1
192.168.152.121 slave2
EOF

或者使用 vi /etc/hosts 命令在文件末尾插入如下代码

1
2
3
192.168.152.81 master
192.168.152.101 slave1
192.168.152.121 slave2
  1. 生成密钥配置一键免密登录
1
2
3
4
5
6
7
# 生成密钥，回车三次即可
ssh-keygen -t rsa

# 将密钥复制给其他的节点便于一键连接，先输入 yes ，再输入节点密码 123456
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2
  1. 解压配置jdk以及hadoop
1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 新建目录 /opt/module 用于放置所有需要的模组文件
mkdir /opt/module

# 解压jdk文件，文件路径为/opt/jdk-8u162-linux-x64.tar.gz，如有变更自行更改
tar -xvzf /opt/jdk-8u162-linux-x64.tar.gz -C /opt/module

# 将jdk目录重命名，方便后续配置
mv /opt/module/jdk1.8.0_162 /opt/module/jdk

# 解压hadoop文件，文件路径为tar -xvzf /opt/hadoop-3.3.0.tar.gz，学校自带镜像没有该版本，该版本为2023参赛所用版本，需要手动上传。
tar -xvzf /opt/hadoop-3.3.0.tar.gz -C /opt/module

# 将hadoop目录重命名，方便后续配置
mv /opt/module/hadoop-3.3.0 /opt/module/hadoop
  1. 设置jdk以及hadoop的环境变量

使用 vi /root/.bash_profile 在文件末尾添加如下内容：

1
2
3
4
export JAVA_HOME=/opt/module/jdk
export PATH=$JAVA_HOME/bin:$PATH
export HADOOP_HOME=/opt/module/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
  1. 配置其他文件节点，执行以下命令：
1
2
3
4
5
# 传输hosts以及.root_profile 配置文件到其他的节点上
scp -r /etc/hosts slave1:/etc
scp -r /etc/hosts slave2:/etc
scp -r /root/.root_profile slave1:/etc
scp -r /root/.bash_profile slave2:/root
  • 打开新的终端页面执行以下指令，配置slave1。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# 连接服务器ssh
ssh root@slave1

# 设置主机名
hostnamectl set-hostname slave1

# 创建文件夹
mkdir /opt/module

# 生成密钥，回车三次即可
ssh-keygen -t rsa

# 将密钥复制给其他的节点便于一键连接，先输入 yes ，再输入节点密码 123456
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2
  • 配置slave2，打开新的终端页面执行以下指令。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# 连接服务器ssh
ssh root@slave2

# 设置主机名
hostnamectl set-hostname slave2

# 创建文件夹
mkdir /opt/module

# 生成密钥，回车三次即可
ssh-keygen -t rsa

# 将密钥复制给其他的节点便于一键连接，先输入 yes ，再输入节点密码 123456
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2
  1. 查看安装情况

在

1
2
3
4
5
6
7
8
# 刷新文件使变量生效
source /root/.bash_profile

# 查看Java安装情况和版本
java -version

# 查看hadoop安装情况和版本
hadoop version

如果都正常输出证明安装成功，如果提示未找到命令则需要排查问题。

二，更改hadoop配置文件

一共有6个配置文件需要更改，hadoop-3.3.0版本需要在4个启动/关闭脚本中添加环境参数，更改文件命令为 vi ./文件名

  1. 更改 hadoop-env.sh文件

切换目录到hadoop配置文件目录下

1
cd /opt/module/hadoop/etc/hadoop

使用如下命令更改：

1
vi ./hadoop-env.sh

查找文件中 JAVA_HOME 关键词并替换为下方路径

  • 提示：可以使用 ?JAVA_HOME 搜索关键词， N 键是查找下一个，在文件内标注export JAVA_HOME= 的地方进行修改，如果有注释需要删除注释进行修改，修改成下方内容
1
export JAVA_HOME=/opt/module/jdk
  1. 更改 core-site.xml 文件

配置文件如下：

1
2
3
4
5
6
7
8
9
10
<configuration>
     <property>
         <name>fs.defaultFS</name>
            <value>hdfs://master:9000</value>
     </property>
      <property>
         <name>hadoop.tmp.dir</name>
            <value>/opt/module/hadoop/tmp</value>
     </property>
</configuration>
  1. 更改 hdfs-site.xml 文件

配置文件如下：

1
2
3
4
5
6
7
8
9
10
<configuration>
    <property>
         <name>dfs.replication</name>
            <value>3</value>
     </property>
     <property>
         <name>dfs.namenode.secondary.http-address</name>
            <value>slave1:50090</value>
     </property>
</configuration>
  1. 更改 mapred-site.xml 文件

配置文件如下：

1
2
3
4
5
6
<configuration>
    <property>
         <name>mapreduce.framework.name</name>
            <value>yarn</value>
     </property>
</configuration>

注：hadoop-2.7.7中需要先复制配置文件模板再进行配置

1
cp ./mapred-site.xml.template ./mapred-site.xml
  1. 更改 yarn-site.xml 文件

配置文件如下：

1
2
3
4
5
6
7
8
9
10
<configuration>
     <property>
         <name>yarn.resourcemanager.hostname</name>
            <value>master</value>
     </property>
       <property>
         <name>yarn.nodemanager.aux-services</name>
            <value>mapreduce_shuffle</value>
     </property>
</configuration>
  1. 更改 workers 文件

在hadoop-2.7.7中该文件名称为 slaves ，hadoop-3.3.0中该文件为workers 记得根据实际情况更改文件名！

配置文件如下：

1
2
3
master
slave1
slave2
  1. 更改 start-dfs.sh 以及 stop-dfs.sh 中的启动变量

使用 vi /opt/module/hadoop/sbin/start-dfs.sh 以及 vi /opt/module/hadoop/sbin/stop-dfs.sh 指令分别更改，在 文件开头第二行插入如下代码！（#!/usr/bin/env的下面）

1
2
3
4
HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root
  1. 更改 start-yarn.sh 以及 stop-yarn.sh 中的启动变量

使用 vi /opt/module/hadoop/sbin/start-yarn.sh 以及 vi /opt/module/hadoop/sbin/stop-yarn.sh 指令分别更改，在 文件开头第二行插入如下代码！（#!/usr/bin/env的下面）

1
2
3
YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root
  1. 将master节点下的模组文件传输给其他的节点
1
2
scp -r /opt/module slave1:/opt
scp -r /opt/module slave2:/opt

三，启动hadoop

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16

# hdfs初始化
hdfs namenode -format

# 启动dfs
start-dfs.sh

# 启动yarn
start-yarn.sh

# 检查启动情况
jps

# 检查其他节点启动情况
ssh root@slave1 "source /root/.bash_profile && hostnamectl && jps"
ssh root@slave2 "source /root/.bash_profile && hostnamectl && jps"

如果启动失败记得先关闭yarn以及dfs，然后再排查问题

1
2
stop-dfs.sh
stop-yarn.sh

问题更改之后记得使用下方命令同步文件！

1
2
scp -r /opt/module slave1:/opt
scp -r /opt/module slave2:/opt

四，配置文件记忆

注意：比赛时所有的配置文件都需要背过！！！ 为了方便背诵，我将所有需要背的配置文件内容拆解开来，助于理解记忆。

理解记忆：

  • xml文件中配置框架英文含义：

    • configuartion：配置
    • property：属性
    • name：名称
    • value：值

  • hadoop-env.sh 文件中需要重点记忆的内容：

    • export JAVA_HOME Java配置路径

  • core-site.xml 文件中需要重点记忆的内容：

    • property hadoop默认主节点的名称
      • name fs.defaultFS
      • value hdfs://master:9000
    • property hadoop缓存目录路径值
      • name hadoop.tmp.dir
      • value /opt/module/hadoop/tmp

  • hdfs-site.xml 文件中需要重点记忆的内容：

    • property hadoop分布式节点数量名称
      • name dfs.replication
      • value 3
    • property hadoop namenode第二节点http地址
      • name dfs.namenode.secondary.http-address
      • value slave1:50090

  • mapred-site.xml 文件中需要重点记忆的内容：

    • property mapreduce framework 名称
      • name mapreduce.framework.name
      • value yarn

  • yarn-site.xml 文件中需要重点记忆的内容：

    • property yarn资源管理主机名称
      • name yarn.resourcemanager.hostname
      • value master
    • property yarn节点管理 aux-services
      • name yarn.nodemanager.aux-services
      • value mapreduce_shuffle

  • workers 文件中需要重点记忆的内容：

    • 所有节点的主机名称

  • *-dfs.sh 文件中需要重点记忆的内容：

    • HDFS_DATANODE_USER=root # HDFS_数据节点_用户=root
    • HADOOP_SECURE_DN_USER=hdfs # HADOOP_安全_DN_用户=hdfs
    • HDFS_NAMENODE_USER=root # HDFS_名称节点_用户=root
    • HDFS_SECONDARYNAMENODE_USER=root # HDFS_第二名称节点_用户=root

  • *-yarn.sh 文件中需要重点记忆的内容：

    • YARN_RESOURCEMANAGER_USER=root # YARN_资源管理_用户=root
    • HADOOP_SECURE_DN_USER=yarn # HADOOP_安全_DN_用户=yarn
    • YARN_NODEMANAGER_USER=root # YARN_节点管理_用户=root

一键安装脚本

针对南洋学院内网2022参赛环境编写的一键安装脚本，在master节点执行本脚本可以一键安装hadoop。仅供参考

请不要在学习hadoop搭建的时候使用脚本偷懒！脚本参考是为了辅助理解计算机配置hadoop的流程！学习hadoop搭建的过程无需查看，或仅供参考。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
#! /bin/bash

### FIRST 第一板块

# echo "set PATH" 设置脚本执行环境变量，文件位置，模组路径等

JF=/opt/jdk-8u162-linux-x64.tar.gz
HF=/opt/hadoop-3.3.0.tar.gz
MP=/opt/module

# echo "set host 设置主机名以及配置host文件" 
hostnamectl set-hostname master

cat>>"/etc/hosts"<<EOF
192.168.152.81 master
192.168.152.101 slave1
192.168.152.121 slave2
EOF

# echo "set ssh key 配置ssh key进行自动连接" 

ssh-keygen -t rsa # -n '' -f  ~/.ssh/id_rsa
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2

# echo "set java && hadoop" 解压配置jdk以及hadoop

mkdir $MP
mkdir $MP/jdk
tar -xvzf /opt/jdk-8u162-linux-x64.tar.gz -C $MP/jdk --strip-components 1

mkdir $MP/hadoop
tar -xvzf /opt/hadoop-3.3.0.tar.gz -C $MP/hadoop --strip-components 1

# echo "set PATH 设置jdk以及hadoop的环境变量" 

cat>>"/root/.bash_profile"<<EOF
export JAVA_HOME=$MP/jdk
export PATH=\$JAVA_HOME/bin:\$PATH
export HADOOP_HOME=$MP/hadoop
export PATH=\$PATH:\$HADOOP_HOME/bin:\$HADOOP_HOME/sbin
EOF


# echo "check install 查看安装情况"

source /root/.bash_profile
java -version
hadoop version

# echo "set slave 设置其他slave节点的主机配置文件" 

scp -r /root/.bash_profile slave1:/root/
scp -r /root/.bash_profile slave2:/root/
scp -r /etc/hosts slave1:/etc/
scp -r /etc/hosts slave2:/etc/

# echo "set ssh slave ssh连接设置其他节点"
  
ssh root@slave1 <<EOF
hostnamectl set-hostname slave1
mkdir $MP

ssh-keygen -t rsa -n '' -f  ~/.ssh/id_rsa
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2
EOF

ssh root@slave2 <<EOF
hostnamectl set-hostname slave2
mkdir $MP

ssh-keygen -t rsa -n '' -f  ~/.ssh/id_rsa
ssh-copy-id master
ssh-copy-id slave1
ssh-copy-id slave2
EOF

### SECOND 第二板块

# hadoop settings file 设置hadoop配置文件

# 替换 hadoop-env.sh 中的JAVA_HOME PATH文件
sed -i '/export JAVA_HOME=/cexport JAVA_HOME='$MP'/jdk' $MP/hadoop/etc/hadoop/hadoop-env.sh

# 配置 core-site.xml 文件
cat > $MP/hadoop/etc/hadoop/core-site.xml <<EOF
<configuration>
     <property>
         <name>fs.defaultFS</name>
            <value>hdfs://master:9000</value>
     </property>
      <property>
         <name>hadoop.tmp.dir</name>
            <value>/opt/module/hadoop/tmp</value>
     </property>
</configuration>
EOF

# 配置 hdfs-site.xml 文件
cat > $MP/hadoop/etc/hadoop/hdfs-site.xml <<EOF
<configuration>
    <property>
         <name>dfs.replication</name>
            <value>3</value>
     </property>
     <property>
         <name>dfs.namenode.secondary.http-address</name>
            <value>slave1:50090</value>
     </property>
</configuration>
EOF

# 配置 mapred-site.xml 文件
cp $MP/hadoop/etc/hadoop/mapred-site.xml.template $MP/hadoop/etc/hadoop/mapred-site.xml
cat > $MP/hadoop/etc/hadoop/mapred-site.xml<<EOF
<configuration>
    <property>
         <name>mapreduce.framework.name</name>
            <value>yarn</value>
     </property>
</configuration>
EOF

# 配置 yarn-site.xml 文件
cat > $MP/hadoop/etc/hadoop/yarn-site.xml<<EOF
<configuration>
<!-- Site specific YARN configuration properties -->
     <property>
         <name>yarn.resourcemanager.hostname</name>
            <value>master</value>
     </property>
       <property>
         <name>yarn.nodemanager.aux-services</name>
            <value>mapreduce_shuffle</value>
     </property>
</configuration>
EOF

# 配置 slaves 文件 hadoop-2.7.7
cat > $MP/hadoop/etc/hadoop/slaves<<EOF
master
slave1
slave2
EOF

# 配置workers wenjian hadoop-3.3.0
cat > $MP/hadoop/etc/hadoop/workers<<EOF
master
slave1
slave2
EOF

# hadoop-3.3.0 need to add PATH for start&stop shell hadoop-3.3.0需要添加PATH变量到启动/关闭脚本中

sed -i "2i HDFS_DATANODE_USER=root" $MP/hadoop/sbin/start-dfs.sh
sed -i "2i HADOOP_SECURE_DN_USER=hdfs" $MP/hadoop/sbin/start-dfs.sh
sed -i "2i HDFS_NAMENODE_USER=root" $MP/hadoop/sbin/start-dfs.sh
sed -i "2i HDFS_SECONDARYNAMENODE_USER=root" $MP/hadoop/sbin/start-dfs.sh

sed -i "2i HDFS_DATANODE_USER=root" $MP/hadoop/sbin/stop-dfs.sh
sed -i "2i HADOOP_SECURE_DN_USER=hdfs" $MP/hadoop/sbin/stop-dfs.sh
sed -i "2i HDFS_NAMENODE_USER=root" $MP/hadoop/sbin/stop-dfs.sh
sed -i "2i HDFS_SECONDARYNAMENODE_USER=root" $MP/hadoop/sbin/stop-dfs.sh

sed -i "2i YARN_RESOURCEMANAGER_USER=root" $MP/hadoop/sbin/start-yarn.sh
sed -i "2i HADOOP_SECURE_DN_USER=yarn" $MP/hadoop/sbin/start-yarn.sh
sed -i "2i YARN_NODEMANAGER_USER=root" $MP/hadoop/sbin/start-yarn.sh

sed -i "2i YARN_RESOURCEMANAGER_USER=root" $MP/hadoop/sbin/stop-yarn.sh
sed -i "2i HADOOP_SECURE_DN_USER=yarn" $MP/hadoop/sbin/stop-yarn.sh
sed -i "2i YARN_NODEMANAGER_USER=root" $MP/hadoop/sbin/stop-yarn.sh

### THIRD 第三板块

# trasnfer module 将配置好的模组路径下的所有文件传输到其他节点
scp -r $MP slave1:/opt
scp -r $MP slave2:/opt

# check hadoop start 启动hadoop
hdfs namenode -format
$MP/hadoop/sbin/stop-dfs.sh
$MP/hadoop/sbin/stop-yarn.sh
$MP/hadoop/sbin/start-dfs.sh
$MP/hadoop/sbin/start-yarn.sh

# 检查启动情况
hostnamectl
jps

ssh root@slave1 "source /root/.bash_profile && hostnamectl && jps"
ssh root@slave2 "source /root/.bash_profile && hostnamectl && jps"

其他操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
# 覆盖文件
cat>"/etc/hosts"<<EOF 
EOF

# 在文件末尾添加

cat>>"/etc/hosts"<<EOF
EOF

# 自动ssh配置
sed -i '/StrictHostKeyChecking/cStrictHostKeyChecking no' /etc/ssh/ssh_config
rm -rf ~/.ssh/{known_hosts,id_rsa*}

# tar末尾添加参数--strip-components 1 可以去掉最外层的目录

# 目录更改重命名
mv $MP/hadoop-2.7.7 $MP/hadoop
mv $MP/jdk1.8.0_162 $MP/jdk

ssh root@slave1 "source /root/.bash_profile"
ssh root@slave2 > /dev/null 2>&1 <<EOF

# JAVA_HOME路径直接添加
echo "export JAVA_HOME=$MP/jdk" >> $MP/hadoop/etc/hadoop/hadoop-env.sh

# 传输hadoop的配置文件所在目录
scp -r $MP/hadoop/etc/hadoop slave1:$MP/hadoop/etc
scp -r $MP/hadoop/etc/hadoop slave2:$MP/hadoop/etc

# dfs启动脚本添加参数，不能直接使用，需要添加到文件头
cat >> $MP/hadoop/sbin/start-dfs.sh<<EOF

HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root

EOF

cat >> $MP/hadoop/sbin/stop-dfs.sh<<EOF

HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root

EOF

cat >> $MP/hadoop/sbin/start-yarn.sh<<EOF

YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root

EOF

cat >> $MP/hadoop/sbin/stop-yarn.sh<<EOF

YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root

EOF

# 传输hadoop启动脚本文件
scp -r $MP/hadoop/sbin slave1:$MP/hadoop
scp -r $MP/hadoop/sbin slave2:$MP/hadoop

]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla MCBE 88音平均律 http://blog.imc.re/archives/7d13.html 2023-05-14T07:51:38.000Z 2025-04-11T15:55:23.002Z

前言

今天修IMC Geyser的时候看到冲田在烷MC，随便试了试Xbox联机没想到进去了）然后冲田似乎在研究playsound的调音，我才知道原来MCBE的playsound命令还有微分音的用法（红石音乐人狂喜x）通过微分音的调教，理论上突破原版材质包里自带的音符盒音域，实现88音的完整钢琴音域就可能实现了，如果再搭配上midi文件的转化就可以实现在MC游戏里不依靠任何材质包，mod等就能实现音乐的播放！

虽然已经有相关的项目了，比如 Open Note Block Studio 就已经实现了nbs音乐相关的编辑，以及midi文件的转换。不过这个工具目前只支持MCJE，并不支持MCBE，扩展音域似乎也是通过扩展音符包来实现的，相对繁琐。本文主要记录一下MCBE的playsound调音对应88键平均律的对应数值以及方法，虽然不一定在MCJE适用，但是基本方法应该是差不多的，可以作为参考留档。

基本知识

让我们先来复习一下初中基本物理知识——声音的基本三要素：

  • 音色：波形决定了声音的音调。由于不同对象材料的特点，声音具有不同的特性，音色本身就是抽象的东西，但波形就是把这种抽象和直观的性能。波形因音调而异，不同的音调可以通过波形来区分。
  • 音调：声音的高低由频率决定，频率越高音调越高，人耳听觉范围20—20000Hz；20Hz以下称为次声波，20000Hz以上称为超声波。
  • 响度：指人耳感觉到的声音强弱，即声音响亮的程度，根据它可以把声音排成由轻到响的序列。响度的大小主要依赖于声强和频率，振幅越大响度越大，人和声源的距离越小，响度越大。

而这三要素在Minecraft的 /playsound 指令里基本算是都齐活了，声音的基本三要素和MC指令的信息对应还是需要说明一下（毕竟wiki没提）：

MCBE的 /playsound 指令：

1
/playsound <sound: string> [player: target] [position: x y z] [volume: float] [pitch: float] [minimumVolume: float]

示例指令：音色为 note.pling ，音调为 中央C（C4） ，播放给全局玩家。

1
/playsound note.pling @a ~~~ 9999 0.7

指令预览

简单说明：

  • 音色：对应的 <sound: string> ，只能调用 sounds.json 里的项目，具体的可以去Minecraft Wiki或者自行拆包查看，有预览表，也可以使用自制的材质包实现自定义音色。值得一提的是MC中所有的音效都可以使用。这里列几个常用的Note音色：
    • note.harp 音符盒音色，算是MC红石音乐比较标志性的音色。类似音色： note.pling ，声音比较洪亮，音长相对较长。
    • note.guitar 音符盒吉他音色，拨弦乐器声音采样比较短促，类似音色： note.banjo 班卓琴音色
    • note.bass 音符盒贝斯音色，低音必备。类似音色： note.bassattack
    • note.hat 音符盒打击音色，可以当鼓点使用。类似音色： note.bd note.snare
    • note.flute 音符盒笛声音色，使用高频播放的话可以达到延音的效果（吹奏类乐器音色的好处，采样出来的音色首尾相接基本不会有违和感，《光遇》里的乐器演奏也能用类似的方法实现延音。）类似音色： note.didgeridoo 有点低音号的感觉，但是高频播放不是很连贯。
    • note.bit bit音乐采样音色，算是电子音乐比较经典的音色。类似音色： note.bell 八音盒感觉的音色， note.cow_bell 相对低沉的八音盒感觉的音色
  • 音调：对应的 [pitch: float] ，以数值的形式表现，默认是 1 ，在 note.pling 中对应十二平均律中的 F# 。这种对应关系也是本文的重点，大概是通过程序将音色移调的参数，通过这种方式即便不把所有音符采样塞进游戏里理论上也能实现十二平均律，以及对应的钢琴八十八键的复原。
  • 响度：响度有些特殊，决定响度的是 [player: target] [position: x y z] [volume: float] [minimumVolume: float] 这三个参数决定，依次是玩家目标，声音发生的位置，能够听到声音的范围，和补偿范围。没有直接影响响度的变量，不过可以通过这些参数间歇性的实现响度的控制，甚至环绕音的混响实现也是有可能的。

详细参数说明：

sound: string：basic_string

指定要播放的声音。必须为在sounds.json中被定义的一个声音项目（例如，entity.pig.ambient）。

一个声音项目可被多个不同的声音关联，而实际产生的声音为从中随机挑选的结果，被选中的概率由其权重决定，与正常游戏中相同。例如，声音项目entity.pig.ambient会随机播放多种猪音效之一，因为有多个声音关联于该项目。

资源包可能会向sounds.json中添加额外的声音项目；此命令可以正常播放这些项目。该命令使用的声音名称不是文件名；而是严格使用sounds.json内定义的项目（项目名称可能与实际音频文件的文件名和目录相差甚远），因此资源包在添加新声音时必须为这些音频文件定义声音事件项目（但当资源包替换原有的已被定义的音频文件时，不必为其重新定义）。

player: target：CommandSelector Player

指定播放声音的目标。

必须为玩家名、目标选择器或UUID。且目标选择器只允许玩家。

position: x y z：CommandPositionFloat

指定声音发出的方位。

必须为三维坐标，元素为浮点数。允许波浪号与脱字号标记。

volume: float：float

指定声音能被听见的距离。必须至少为0.0。对小于1.0的值，声音会相对减轻，球状可闻范围会相对小。对大于1.0的值，声音不会实际上增大，但其可闻范围（1.0时半径为16米）会与_音量_相乘。声音总会基于与球体中心的距离逐渐衰减至无声。默认为1.0。

必须为单精度浮点数。在Java版中，必须大于等于0.0。

pitch: float：float

指定声音的音调。若未指定，默认为1.0。

在Java版中，该数值必须在0.0至2.0间（含），而小于0.5的值与0.5等价。小于1.0的值降低音调而提升持续时间；大于1.0的值提升音调而降低持续时间。音调值是乘在声音频率上的一个倍率，因此若将0.5-1.0（含）区间内的音调值乘以2，所得的新音调便会高一个八度。

在基岩版中，该数字没有特别限制，但是必须要在0.0至256.0之间才有对应效果。高于256.0的值与默认值的效果相同。小于等于0.0的值会导致听不到该声音。

  • 对于音符盒的声音，如果你希望将其他音符转换为音调数值，请参阅相关内容。但请注意1.0的音调值对于每种声音并不一定都是F♯。

minimumVolume: float：float

指定在声音可闻范围外的目标能听到的音量。若目标在可闻范围外，作为补偿，声源会被放置在距离目标较近的位置（距离小于4格），而_最小音量_会决定补偿声源的音量。

如果此数值等于0，则正常可闻范围外的目标听不到声音。如果未指定，则默认为0.0。

必须为单精度浮点数。在Java版中，必须在0.0和1.0（含）之间。

——《命令/playsound - Minecraft Wiki》

有这三要素基本就满足了声音构成的条件，但是把范围缩小到 音乐 当中，光有这基本三要素是不够的，关于 音调 的使用范围至关重要，而在乐理中基本的音调构成范围就不得不提到 十二平均律 了：

十二平均律（12-equal temperament）又称十二等程律，是世界上通用的一组音（八度）分成十二个半音音程的律制，各相邻两律之间的波长之比完全相等。 十二平均律是由中国明朝皇族世子朱载堉发现。

十二平均律是指八度的音程按波长比例平均分成十二等份，每一等份称为一个半音（小二度）。一个大二度则是两等份，称为全音。将一个八度分成12等份有着惊人的一些巧合。这是因为它的纯五度音程的两个音的波长比（即1/2的7/12次方）约为0.6674，与2/3，约为0.6667，非常接近。

十二平均律在交响乐队和键盘乐器中得到广泛使用，钢琴即是根据十二平均律来定音的。

——十二平均律_百度百科 (baidu.com)

十二平均律图表

可能有人会问为什么要拘泥于十二平均律？使用微分音创作音乐不是也很新吗？其实这么想也不是不可以，不过截至目前，人类的基本音乐创作理论体系 （俗称乐理） 还“局限”于基于十二平均律中，因此，想要作出“给人听”的音乐十二平均律的存在是不可或缺的。当然科技发展至今，使用微分音创作的电子音乐也不算少数，这个就因人而异咯xd 借用《海上钢琴师》里我印象深刻的经典台词来说：

Take a piano. The keys begin, the keys end. You know there are eightyeight of them, nobody can tell you any different. They are not infinite. You are infinite. And on these keys the music that you can make is infinite. I like that. That I can live by.

译：拿一架钢琴来说，从琴键开始，又结束。**你知道钢琴只有88个键，随便什么琴都没差。它们不是无限的。你才是无限的，在琴键上制作出的音乐是无限的。**我喜欢这样，我活的惯。

MC中的平均律

理论成立，实践开始！Minecraft原版中的音符盒的音域只有F#3到F#5的25个键，想要还原钢琴八十八键的音域一般来说只有扩展材质包，mod之类的办法。

image-20230514173645051

但是通过 /playsound 指令中的 [pitch: float] 调音参数就能实现原版MC不使用任何外部资源加持的前提下实现88键钢琴音域的还原！ （甚至超出88键都有可能xd）那么在这其中需要实现各个键位的音调还原，Minecraft中 pitch参数和十二平均律的对应关系是必不可少的。

本来以为是很简单的正比线性对应关系，但是试了几个数之后感觉有点不对。。比如 p=1 的时候音色 note.pling 对应的是 F#4， p=2 的时候对应的是 F#5，但是到 F#3的时候对应的 p=0.5 ，并不是一般的一次函数线性关系。

通过冲田分享的文章 【我的世界】playsound钢琴全键音调值 - 哔哩哔哩 (bilibili.com) 知道了基本的对应关系式~~（不知道是怎么来的，不过随机抽样了几个数试了试大概是对的，就按这个公式来看吧x）~~：

p=2(n−12)12p=2^{\frac{\left(n-12\right)}{12}}

image.png

其中 pp 代表的是 [pitch: float] 中的数值，而 nn 则是十二平均律中的数值关系， nn 的整数之间都是半音关系，比如在音色 note.pling 中， n=0n=0 的时候对应 p=0.5p=0.5 ，对应的 F#3 , n=12n=12 的时候对应 p=1p=1 对应的 F#4，n=24n=24 的时候对应 p=2p=2 ...... 以此类推，便能得到钢琴八十八键对应的音符音调了。

钢琴频谱

值得一提的是，MC中所有可以使用的音效对应的基准因，也就是 p=1 对应的音，并不一定都是 F# ，但是就目前来看，所有 Note 类型的音色对应的基准音都是 F#，所以以 F# 为基准音的基础上去测试以及记录对应的88音平均律的基本关系，如果有基准因不是 F# 的，也可以通过参考这个基准音对应关系来进行平移得到相对应的平均律谱表。

88音平均律谱表

以 note.pling 音色为基准，通过 p=1 F#3 的基本音关系延伸，根据 p=2^((n-12)/12) 的关系式，测试计算出来的平均律谱表如下（p取值为小数点后四位数）：

p=2(n−12)12p=2^{\frac{\left(n-12\right)}{12}}

测试指令：

1
/playsound note.harp @a ~~~ 1 p
np音符音域
-330.0743A0
-320.0787A#
-310.0834B
-300.0884C1
-290.0936C#
-280.0992D
-270.1051D#
-260.1114E
-250.1180F
-240.1250F#
-230.1324G
-220.1403G#
-210.1487A
-200.1575A#
-190.1669B
-180.1768C2
-170.1873C#
-160.1984D
-150.2102D#
-140.2227E
-130.2360F
-120.2500F#
-110.2649G
-100.2806G#
-90.2973A
-80.3150A#
-70.3337B
-60.3536C3
-50.3746C#
-40.3969D
-30.4204D#
-20.4454E
-10.4719F
00.5000F#
10.5297G
20.5612G#
30.5946A
40.6300A#
50.6674B
60.7071C4
70.7492C#
80.7937D
90.8409D#
100.8909E
110.9439F
121.0000F#
131.0595G
141.1225G#
151.1892A
161.2599A#
171.3348B
181.4142C5
191.4983C#
201.5874D
211.6818D#
221.7818E
231.8877F
242.0000F#
252.1189G
262.2449G#
272.3784A
282.5198A#
292.6697B
302.8284C6
312.9966C#
323.1748D
333.3636D#
343.5636E
353.7755F
364.0000F#
374.2379G
384.4898G#
394.7568A
405.0397A#
415.3394B
425.6569C7
435.9932C#
446.3496D
456.7272D#
467.1272E
477.5510F
488.0000F#
498.4757G
508.9797G#
519.5137A
5210.0794A#
5310.6787B
5411.3137C8

以上表格使用Excel计算 原文件 （懒人一个xd） ：【腾讯文档】MC音律表

结语

从未设想过的道路）如果能加上midi转换的话，那么直接在MC里制作音乐也是完全有可能的了（确信。虽然有了nbs音乐，但是nbs本身并不支持在原版MC中直接播放，虽然可以用NBS Studio进行转换，但是目前NBS Studio也不支持MC基岩版，以及原版适配中目前似乎并没有支持到用命令扩展音域的地步（不过高版本mcfunction似乎可行。？）能在原生的MC里实现88音律表，也方便以后创作红石音乐的人们。

简单的一次尝试，也学到了不少东西，xd

]]> <link rel="stylesheet" class="aplayer-secondary-style-marker" href="/assets/css/APlayer.min.css"><script src="/assets/js/APlayer.min.js" cla Nostr浅尝记录 http://blog.imc.re/archives/99d4.html 2023-05-12T09:59:13.000Z 2025-04-11T15:55:22.997Z

前言

Nostr是什么？一句话总结nostr：基本成型的去中心化的社交网络。

其实相关的概念已经见到过不少了，“去中心化”也是最近网上的热点 (嘛，多半都是被比特币炒上去的热度就是了，实际上关注技术和应用本身的人并不算很多x) 而Nostr就是“去中心化社交网络”的具体体现之一（似乎有别的，不过我没接触过x）

我本身对“去中心化”其实也有一定的兴趣和倾向，不过个人技术力属实有限，能做到的事情太少，充其量也就是看看别人做的现成品x。不过经过大半天的琢磨体验下来，稍稍总结了一些心得。尽管在自己的nostr账户上也发布了，不过由于无法修改/删除，故不公开，只写在博客上作为记录（毕竟博客的数据是自己的x）

nostr相关链接

为了研究nostr专门把edge开了个分类，感觉浏览器快被我用成图书馆了x

去中心化的“web3”概念提出到现在，Nostr是第一个我看到，并且亲自尝试的实际项目。 概念的变革都是由理想家提出，由工程师落实，最后让用户进行巩固充盈，这三者缺一不可，但资本并不是绝对必须的存在。 对于Nostr网络的未来，我还是很期待的。

使用体验&区别

一般的使用体验基本和Twitter差不多，发送文章，评论，点赞什么的（尽管不能撤销x）主要说下技术上的区别带来的直观体验吧。

1. 账户体验：

应该是最直观的体验差异，账户不像中心化管理的社交网络那样使用常规的邮箱/手机号注册，密码验证，而是使用公钥私钥进行创建账户以及认证信息。这样做和中心化管理的最大差异就是你可以使用公钥看到对方的信息，包括发的文章，关住，粉丝，甚至私信对象（大部分nostr客户端的设计把公钥和私钥都设置成可以登录的认证方式了）

但是并不是所有信息都能看到，毕竟那样就没有设置账户的意义了）私信内容会被加密，只有有私钥的人才能看到具体内容，公钥看就是一团乱码。此外没有私钥的话也不能进行信息交互，发文章点赞关注之类的。大体来说其实和传统的账户使用无异。但是公钥和私钥都是不能更改的，所以说一旦泄露这个账户基本就相当于废了，正儿八经用的话可以使用密码管理器一类的东西来保存。

2. 客户端体验：

客户端体验算是一个比较直观的体验差距，和传统中心化管理的社交网络不同，没有“官方客户端”这一说，所有客户端都是第三方的。这样做有利有弊吧，相比起传统的中心化社交网络的第三方客户端，去中心化的社交网络的客户端开发显然地位要比前者高，可操性也更强，事实上半天的琢磨已经发现了不少开源的客户端，软件网页应有尽有，各有各的好处和优势，不过展开讲就长了，留着挖个坑，回头再说x。

基本内容都是一样的，可以看到别人的文章，基本的信息，发布自己的文章等等。要说有什么不同的话，那就是相比起中心化的社交网络多了个“node节点选择”的功能，不同的节点获取到的信息可能是不一样的，你发送的信息实际上也是悲存储在了node节点中。不过倒是不用太担心数据安全的问题（大概 该加密的数据就算存储在别人的node上也会以加密的形式存储，解密需要用到私钥，这个是客户端的活。

3. 服务器体验：

至少直到目前为止，去中心化的优势并没有在中国有所体现，因为基本上绝大多数的节点都被gfw噶掉了）而且去中心化的社交网络不利于监管，对于中国这种林子大了什么鸟都有的国家还是不太适用）不过可以自建node节点，这点倒是和传统的中心化社交网络差异性比较大。目前为止从 nostr.watch 的网站来看，已经有了500多个节点，不过大半集中在欧美地区，亚洲地区的node节点还比较少，目前来看日本那边可能用的人多一些（大概是twitter的难民）国内节点目前来看的话，台湾有一个节点，大陆有三四个，其中一半不是失效就是乱提交的，实质上能用的似乎只有一个（开node的大哥哥加油啊x），看别的人说国内节点迟早也会被制裁，这点我也比较同意，基本暂时不对国内节点保留希望了）

说实话，目前为止的nostr网络虽然说实现了去中心化管理，但是和我想象中的“完全去中心化社交网络”，或者说是“web3”还是有些差距，理想状态下我是希望能做到“用户及节点”的效果，这样用户体量越大社交网络也就越稳定，但是现阶段是“节点越多网络越稳定”，节点数量和用户数量不一定是正相关的，所以有崩溃的风险。另外虽然说从技术角度来看和区块链关系不大，但是目前主要受众群体其实还是吃到区块链红利的那波人，有没有可能下沉到一般用户群体（特别是在中国）也有待商榷。

另外有机会的话我也想试试自建node节点，不过需要考虑的事情还是有很多，比如选择什么样的方式搭建（node节点的实现方式似乎有不少），使用什么服务对外公开，以及通过什么途径来进行使用以及宣传，以及监管措施导致的服务商层面的惩罚等，要考虑清楚在弄，不能随随便便就去弄了，毕竟已经吃到过教训了）

4. 数据体验：

数据的存储，交互可以说是去中心化网络最大的特色和看点，相比起中心化网络，数据的直接所有人是维护中心化网络的主体（一般来说往往是公司）， 去中心化的nostr社交网络的数据从结论上来看则是“不属于任何人”。 尽管数据直接存储在node节点中，但是用户是可以主动选择node节点的，而且用户数据似乎也会被分发到不同的节点中进行分布式存储，以及node搭建的所有人就算能查看到node里的数据，对于隐私数据一般来说是无法查看的，加密信息，密钥等。 说了“不属于任何人”，当然也不属于你自己。你能做到的只有两件事：发布和交互。

你想要删除或者修改都是没有办法的，发布出去的信息相当于“泼出去的水”，而且还不会干，会一直保留在去中心化的网络中。账户也是同理，无法注销，无法修改密码。从好的方面来想一定程度上保证了数据的安全性，以及相比起传统的中心化社交网络来说隐秘性更高，因为你的隐私数据只有你自己（私钥所有人）可以查看，连服务提供者都没法看到； 从不好的方面来考虑，那就是现阶段的去中心化社交网络“太危险了” ：

因为数据“不属于任何人”，而认证账户的唯一手段是一个无法更改的密钥，你的账户也是并不是绝对安全的，也没有法律措施能够保护账户上的财产安全，上升到“国家舆论保护”的层面更是如此，所以短时间内这种模式的去中心化社交网络很难在中国普及开来。下放到商业化操作，这种去中心化的社交网络所承载的账号也绝对不是什么好选择，不管是作为公司企业的官方账号，还是偶像演员明星的活动账号，放在这种去中心化的社交网络风险都是相当大的，一方面是资本引来的大量流量，作为媒介的账号本身就具有价值，肯定会有人图谋不轨试图获取账号，万一账号密钥泄露，相关的公司或者艺人几乎没有任何办法再把这个账号挽回，放弃账号的话就相当于把一个常年积累的流量入口拱手让人，甚至会产生负面影响。这点其实下放到个人，上升到国家都是一样的，只是影响规模的程度问题。

综上所述，当前的去中心化社交网络几乎不可能吃到资本带来的流量红利，更多的其实还是向往自由的个体户在进行“尝鲜”。其实这种网络更加符合我心目中的“互联网精神”，其技术架构模式也类似bt那样的文件上传存储下载技术，但是如果失去了“资本的利益”，这种网络究竟能走多远，就不得而知了。虽然个人来说看好这种技术，但是就目前来说，他是一个“自由的混乱都市”，无法承担“世界级”的任务。

对了，补充一点。因为账户创建的低成本以及数据所有的特性，nostr其实有被大量bot用户灌溉“垃圾信息”的风险。但是目前来看nostr网络实际存储的信息只有文字和账户基本设定等基本信息，图片等其他资源还是引用的外部资源，包括头像，横幅，以及各种插入图也是。虽然有 nostr.build 这样的资源上传站点，但是实际上是否是用的nostr网络进行存储不得而知，似乎也并不是开源的。Amethyst的上传是可以自选图片托管方的，其他客户端目前不得而知，大概是随便选了个，或者是直接自建了吧。

]]> <h1 id="前言"><a class="markdownIt-Anchor" href="#前言"></a> 前言</h1> <p>Nostr是什么？一句话总结nostr：<strong>基本成型的去中心化的社交网络。</strong></p> <p>其实相关的概念已经见到过不少了，“去中心化”也是最近网上的热点 <s>(嘛，多半都是被比特币炒上去的热度就是了，实际上关注技术和应用本身的人并不算很多x)</s> 而Nostr就是“去中心化社交网络”的具体体现之一（似乎有别的，不过我没接触过x）</p> 图床测试 http://blog.imc.re/archives/f2eb.html 2023-04-29T05:45:21.000Z 2025-04-11T15:55:23.000Z

SMGPhoto

采用 PicGo客户端 + Github + Cloudflare Pages+ thumbsup 的方案实现完全脱离自托管服务器的自建静态渲染图床网站.

效果好像还行, 就是Cloudflare编译网站的时间比较长, PicGo每上传一个图片都要重新编译一遍, 每次都得等个一分多钟才能加载好. ~~一时半会不知道要传什么图片, 就随便截图群里的几张扔上去了, 23333)

项目地址：SMGCDN/Photos

相册站点：SMGoro Photos

使用项目概览:

图床地址

Cloudflare（速度一般，刷新速度慢）

托管在Cloudflare Pages上的图片有经过Thumbsup相册的处理，可以实现略缩图，原图，水印图的处理，总的来说，十分牛逼，就是每次都要从头构建导致刷新速度有点慢x

1
2
3
4
5
6
7
8
9
10
11
12
13
# Pages
https://smgimg.pages.dev/
# IMC.RE
https://img.imc.re/
# 略缩图
https://img.imc.re/media/small/
# 处理图
https://img.imc.re/media/large/

example:
![CF_IMC](https://img.imc.re/logo/imc.re.png)
![CF_small](https://img.imc.re/media/small/wallpaper/bg.jpg)
![CF_large](https://img.imc.re/media/large/wallpaper/bg.jpg)

example:

CF_IMCCF_smallCF_large

Gitee（国内速度快，Action同步）

1
2
3
4
https://gitee.com/smgoro_0/photos/raw/master/

# example:
![Gitee](https://gitee.com/smgoro_0/photos/raw/master/logo/imc.re.png)

example:

Gitee

jsdelivr（速度海星，缓存刷新慢）

1
2
3
4
5
6
7
8
# 刷新链接
https://purge.jsdelivr.net/gh/SMGCDN/photos/
# 请求链接
https://cdn.jsdelivr.net/gh/SMGCDN/photos/
https://gcore.jsdelivr.net/gh/SMGCDN/photos/

# example:
![jsdelivr](https://cdn.jsdelivr.net/gh/SMGCDN/photos/logo/imc.re.png)

example:

jsdelivr

GithubRaw（国内速度慢，刷新速度快）

1
2
3
4
https://raw.githubusercontent.com/smgcdn/photos/master/

# example:
![GithubRaw](https://raw.githubusercontent.com/smgcdn/photos/master/logo/imc.re.png)

example:

GithubRaw

]]> <h1 id="smgphoto"><a class="markdownIt-Anchor" href="#smgphoto"></a> SMGPhoto</h1> <p>采用 PicGo客户端 + Github + Cloudflare Pages+ thumbsup 的方案实现完全脱离自托管服务器的自建静态渲染图床网站.</p> 群友逆天言论 http://blog.imc.re/archives/e795.html 2023-04-28T11:55:20.000Z 2025-04-11T15:55:23.000Z

其实只是为了测试图床上传xd) 采用 PicGo客户端 + Github + Cloudflare Pages+ thumbsup 的方案实现完全脱离自托管服务器的自建静态渲染图床网站.

效果好像还行, 就是Cloudflare编译网站的时间比较长, PicGo每上传一个图片都要重新编译一遍, 每次都得等个一分多钟才能加载好. ~~一时半会不知道要传什么图片, 就随便截图群里的几张扔上去了, 23333)

使用项目概览:

效果预览

烈焰姐逆天言论

附身

Pasted image 20230428202439

]]> <p><s>其实只是为了测试图床上传xd)</s> 采用 PicGo客户端 + Github + Cloudflare Pages+ thumbsup 的方案实现完全脱离自托管服务器的自建静态渲染图床网站.</p> latex公式渲染测试 http://blog.imc.re/archives/2400.html 2023-04-28T09:33:51.000Z 2025-04-11T15:55:23.000Z

前言

博客Latex公式渲染老炸, 气死我啦啊啊啊啊啊啊!!! 这叫我怎么总结数学笔记嘛!!!

用这个页面记录几个newbing给的公式, 用来测试latex公式的渲染)

测试

使用latex语法给我列几个复杂的公式

当然，我可以给你列举一些复杂的公式。以下是一些例子：

  1. ∑i=1ni=n(n+1)2\sum_{i=1}^{n} i = \frac{n(n+1)}{2}

  2. ∫−∞∞e−x2dx=π\int_{-\infty}^{\infty} e^{-x^2} dx = \sqrt{\pi}

  3. f(x)={0x<01xx≥0f(x) = \begin{cases} 0 & x < 0 \\ \frac{1}{x} & x \geq 0 \end{cases}

  4. lim⁡x→∞(1+1x)x=e\lim_{x\to\infty} \left(1 + \frac{1}{x}\right)^x = e

  5. eiπ+1=0e^{i\pi} + 1 = 0

希望这些例子能帮到你。如果你还有其他问题，请随时问我。

源: 与必应的对话， 2023/4/28(1) 超详细 LaTex数学公式_latex公式_ViatorSun的博客-CSDN博客. https://blog.csdn.net/ViatorSun/article/details/82826664.(2) LaTeX 公式篇 - 知乎. https://zhuanlan.zhihu.com/p/110756681.(3) 如何用LaTeX写公式（示例了十余个公式，涵盖了大多 .... https://blog.csdn.net/weixin_41036461/article/details/84580272.(4) latex如何编辑特别复杂的公式? - 知乎. https://www.zhihu.com/question/574094050.(5) 如何用latex编写矩阵（包括各类复杂、大型矩阵 .... https://zhuanlan.zhihu.com/p/266267223.

再来几个

当然，我可以再给你列举一些复杂的公式。以下是一些例子：

  1. x=−b±b2−4ac2ax = \frac{-b \pm \sqrt{b^2 - 4ac}}{2a}

  2. ∂2u∂t2=c2∂2u∂x2\frac{\partial^2 u}{\partial t^2} = c^2 \frac{\partial^2 u}{\partial x^2}

  3. ∫01dx1+x2=π4\int_{0}^{1} \frac{dx}{1 + x^2} = \frac{\pi}{4}

  4. [100010001]\begin{bmatrix} 1 & 0 & 0 \\ 0 & 1 & 0 \\ 0 & 0 & 1 \end{bmatrix}

  5. ∑n=1∞1n2=π26\sum_{n=1}^{\infty} \frac{1}{n^2} = \frac{\pi^2}{6}

希望这些例子能帮到你。如果你还有其他问题，请随时问我。

]]> <h1 id="前言"><a class="markdownIt-Anchor" href="#前言"></a> 前言</h1> <p>博客Latex公式渲染老炸, 气死我啦啊啊啊啊啊啊!!! 这叫我怎么总结数学笔记嘛!!!</p> <p>用这个页面记录几个newbing给的公式, 用来测试latex公式的渲染)</p> mermaid 测试 http://blog.imc.re/archives/bea7.html 2023-04-28T08:03:27.000Z 2025-04-11T15:55:23.000Z

前言

看到主题插件有这个插件, 就顺便琢磨琢磨了) 正好obsidian有mermaid的插件, 预制了一些模板语法以及预览, 正好拿这篇文章试试效果)

测试

Flowchart

flowchart LRStart --> Stop

SequenceDiagram

sequenceDiagramAlice->>John: Hello John, how are you?John-->>Alice: Great!Alice-)John: See you later!

StateDiagram

stateDiagram-v2    [*] --> Still    Still --> [*]    Still --> Moving    Moving --> Still    Moving --> Crash    Crash --> [*]

EntityRelationshipDiagram

erDiagram    CUSTOMER ||--o{ ORDER : places    ORDER ||--|{ LINE-ITEM : contains    CUSTOMER }|..|{ DELIVERY-ADDRESS : uses

UserJourneyDiagram

journey    title My working day    section Go to work      Make tea: 5: Me      Go upstairs: 3: Me      Do work: 1: Me, Cat    section Go home      Go downstairs: 5: Me      Sit down: 5: Me

GanttChart

gantt    title A Gantt Diagram    dateFormat  YYYY-MM-DD    section Section    A task           :a1, 2014-01-01, 30d    Another task     :after a1  , 20d    section Another    Task in sec      :2014-01-12  , 12d    another task      : 24d

PieChart

pie title /r/obsidianmd posts by type    "Look at my awesome graph" : 85    "Look at my cool dashboard" : 14    "Moved from Notion, liking it" : 1

RequirementDiagram

    requirementDiagram    requirement test_req {    id: 1    text: the test text.    risk: high    verifymethod: test    }    element test_entity {    type: simulation    }    test_entity - satisfies -> test_req

GiteGraph

gitGraph    commit    commit    branch develop    checkout develop    commit    commit    checkout main    merge develop    commit    commit
]]> <h1 id="前言"><a class="markdownIt-Anchor" href="#前言"></a> 前言</h1> <p>看到主题插件有这个插件, 就顺便琢磨琢磨了) 正好obsidian有mermaid的插件, 预制了一些模板语法以及预览, 正好拿这篇文章试试效果)</p> 数列求和通项公式 http://blog.imc.re/archives/3123.html 2023-04-28T07:42:53.000Z 2025-04-11T15:55:23.000Z

前言

尝试借由Newbing学习高中数学相关知识 (并非应付烈焰姐的提问) ,用chatgpt学习数学的话需要具备很重要的一点技能, 就是自行查证的能力) 如果只是一味吸收, 不进行任何错误查证的话, 很容易学习到错误的知识, 不过这在我看来, 既是弊端的同时, 也是一个作为训练自己能力的优势)

基础知识

等差数列和公式

等差数列的通项公式为：an=a1+(n−1)da_n=a_1+(n-1)d，其中 a1a_1 为首项，dd 为公差，nn 为项数。前 nn 项和公式为：Sn=n⋅a1+an2S_n=n\cdot\dfrac{a_1+a_n}{2} 或 Sn=n⋅2a1+(n−1)d2S_n=n\cdot\dfrac{2a_1+(n-1)d}{2}。 ¹²

希望这能帮到你。还有其他问题吗？

源: 与必应的对话， 2023/4/28

  1. 等差数列求和公式 - 百度百科. https://bing.com/search?q=等差数列和公式.
  2. 等差数列求和公式 - 百度百科. https://baike.baidu.com/item/等差数列求和公式/7527418.
  3. 等差数列求和公式是什么？_百度知道. https://zhidao.baidu.com/question/1518747751354623700.html.
  4. 等差数列求和公式及答题技巧 - 知乎. https://zhuanlan.zhihu.com/p/357439130.
  5. 等差数列 - 维基百科，自由的百科全书. https://zh.wikipedia.org/wiki/等差数列.

裂项相加

裂项相消法，又称拆分法，是将一个分数拆成两个或两个以上分数相减或相加的形式，然后再进行计算的方法。在数列求和中，裂项相消法就是把通项拆分成“两项的差”的形式，使得恰好在求和时能够“抵消”多数的项而剩余少数几项³。裂项相消法的应用范围很广，包括分数、代数、整数等⁵。

如果你想求等差数列的和，可以使用等差数列求和公式。如果你想求等比数列的和，可以使用等比数列求和公式。如果你想求裂项相加的和，可以使用裂项求和公式⁷。

希望这些信息能对你有所帮助。如果你有其他问题，请随时问我。

源: 与必应的对话， 2023/4/28

  1. 小升初数学：裂项相消法，小学、初中都要考的简便 .... https://baijiahao.baidu.com/s?id=1753072455604821323.
  2. 裂项法_百度百科. https://baike.baidu.com/item/裂项法.
  3. 裂项公式大全合集 - 百度文库. https://wenku.baidu.com/aggs/b02ea9d528ea81c758f578af.html.
  4. 浅谈“裂项” - 知乎. https://zhuanlan.zhihu.com/p/105726498.
  5. 数列中裂项相消法如何裂项？ - 知乎. https://www.zhihu.com/question/396939682.
  6. 裂项求和公式是什么？_百度知道. https://zhidao.baidu.com/question/426560924.html.
  7. 裂项公式大全合集 - 百度文库. https://bing.com/search?q=裂项求和公式.
  8. 裂项法公式合集 - 百度文库. https://wenku.baidu.com/aggs/e1595efe04a1b0717fd5ddb0.html.
  9. 裂项求和_360百科 - SO. https://baike.so.com/doc/1258874-1331334.html.
  10. 数列必须满分系列(3.2) 数列求和---裂项相消 - 知乎. https://zhuanlan.zhihu.com/p/39123013.
  11. 高中生福利到了，高中数列裂项公式收集 - 知乎. https://zhuanlan.zhihu.com/p/439851326.

累加法

累加法是求解数列通项公式的基本方法之一。它是递推法求解数列通项公式的两大基本方法之一，前面学习过的等差数列的通项公式便是用累加法推导得出的。对于形如a (n+1)=an+f (n)或者a (n+1)-an=f (n)的关系式，其中f (n)可以为常数（此时为等差数列），也可以是关于n的函数如一次函数、分式函数、二次函数和指数函数等，此时求解通项公式时均可使用累加法。¹

如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

源: 与必应的对话， 2023/4/28

  1. 百度安全验证. https://bing.com/search?q=累加法.
  2. 【高考数学】5.16 累加法求通项 - 知乎. https://zhuanlan.zhihu.com/p/369597335.
  3. 高中数学：求数列通项公式的十一种方法（方法全 .... https://zhuanlan.zhihu.com/p/73032201.
  4. 数列求和_百度百科. https://baike.baidu.com/item/数列求和/7318680.
  5. 高考数列通项公式解题方法（1）：观察法、公式法 .... https://zhuanlan.zhihu.com/p/103586796.
  6. 高中数学的累加法和累乘法要怎么用？ - 知乎. https://www.zhihu.com/question/62607975.

做题应用

已知an＝1/n - 1/(n+1） 求Sn。

已知an=1/n-1/(n+1)，求Sn。

首先，我们可以将an拆分为两个分式，即an=1/n-1/(n+1)=1/n-(n/(n(n+1)))=1/n-(n/n(n+1))=1/n-1/(n+1)。因此，an的通项公式为a (n)=1/n-1/(n+1)。

接下来，我们可以使用等差数列和公式求解Sn。根据等差数列和公式，前n项和Sn=na (1)+n (n-1)/2d，其中a (1)为首项，d为公差。因此，我们需要求出首项a (1)和公差d。

由于a (n)=a (n-1)+d，因此d=a (n)-a (n-1)=1/n-1/(n+1)-[1/(n-1)-1/n]=2/(n*(n-1))-2/((n+1)*n)，a (1)=a (2)-d=1/2-2/6=-1/6。

将a (1)和d代入等差数列和公式中，得到Sn=n*(-(n+2)/(6*(n+1)))=-((n+2)/(6*(n+1)))n。因此，Sn的通项公式为-Sum[(i+2)/(6(i+1)), {i, 0, n-1}]。

希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

源: 与必应的对话， 2023/4/28

  1. 等差数列求和公式 - 百度百科. https://bing.com/search?q=等差数列和公式.
  2. 等差数列求和公式 - 百度百科. https://baike.baidu.com/item/等差数列求和公式/7527418.
  3. 等差数列求和公式是什么？_百度知道. https://zhidao.baidu.com/question/1518747751354623700.html.
  4. 等差数列求和公式及答题技巧 - 知乎. https://zhuanlan.zhihu.com/p/357439130.
  5. 等差数列 - 维基百科，自由的百科全书. https://zh.wikipedia.org/wiki/等差数列.

求Sn的值

根据上面的计算，Sn的通项公式为-Sum[(i+2)/(6*(i+1)), {i, 0, n-1}]。因此，当n=1时，Sn=-1/6；当n=2时，Sn=-1/3；当n=3时，Sn=-5/12；当n=4时，Sn=-3/8；当n=5时，Sn=-11/30。

因此，Sn的值分别为-1/6、-1/3、-5/12、-3/8和-11/30。

希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

以中国高中数学知识点来总结这个Sn通项公式

好的，我会尽力用中国高中数学知识点来总结这个Sn通项公式。

首先，我们可以将an拆分为两个分式，即an=1/n-1/(n+1)=1/n-(n/(n(n+1)))=1/n-(n/n(n+1))=1/n-1/(n+1)。因此，an的通项公式为a (n)=1/n-1/(n+1)。

接下来，我们可以使用等差数列和公式求解Sn。根据等差数列和公式，前n项和Sn=na (1)+n (n-1)/2d，其中a (1)为首项，d为公差。因此，我们需要求出首项a (1)和公差d。

由于a (n)=a (n-1)+d，因此d=a (n)-a (n-1)=1/n-1/(n+1)-[1/(n-1)-1/n]=2/(n*(n-1))-2/((n+1)*n)，a (1)=a (2)-d=1/2-2/6=-1/6。

将a (1)和d代入等差数列和公式中，得到Sn=n*(-(n+2)/(6*(n+1)))=-((n+2)/(6*(n+1)))n。因此，Sn的通项公式为-Sum[(i+2)/(6(i+1)), {i, 0, n-1}]。

这个通项公式涉及到了等差数列和公式、分式拆分、数学归纳法等知识点。希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

-Sum[(i+2)/(6(i+1)), {i, 0, n-1}] 是什么

-Sum[(i+2)/(6(i+1)), {i, 0, n-1}]是Sn的通项公式。其中，Sum表示求和，i是求和的变量，0和n-1是求和的范围，(i+2)/(6(i+1))是求和的表达式。这个通项公式可以用来计算Sn的值。

希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

用latex公式表示求Sn通项公式的过程

好的，下面是用LaTeX公式表示求Sn通项公式的过程：

首先，我们可以将an拆分为两个分式，即an=1/n-1/(n+1)=1/n-(n/(n(n+1)))=1/n-(n/n(n+1))=1/n-1/(n+1)。因此，an的通项公式为an=1n−1n+1a_n=\frac{1}{n}-\frac{1}{n+1}。

接下来，我们可以使用等差数列和公式求解Sn。根据等差数列和公式，前n项和Sn=na1+n(n−1)2dS_n=na_1+\frac{n(n-1)}{2}d，其中a1a_1为首项，d为公差。因此，我们需要求出首项a1a_1和公差d。

由于an=an−1+da_n=a_{n-1}+d，因此d=an−an−1=2n(n−1)−2(n+1)nd=a_n-a_{n-1}=\frac{2}{n(n-1)}-\frac{2}{(n+1)n}，a1=a2−d=12−26=−16a_1=a_2-d=\frac{1}{2}-\frac{2}{6}=-\frac{1}{6}。

将a1a_1和d代入等差数列和公式中，得到Sn=n(−n+26(n+1))=−(n+2)n6(n+1)S_n=n(-\frac{n+2}{6(n+1)})=-\frac{(n+2)n}{6(n+1)}。因此，Sn的通项公式为∑i=0n−1−i+26(i+1)\sum_{i=0}^{n-1}-\frac{i+2}{6(i+1)}。

希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

为什么使用等差数列求和公式计算？

使用等差数列求和公式计算Sn的好处是可以避免使用累加法，从而节省时间和精力。等差数列求和公式是一种通用的求和方法，适用于各种等差数列，包括公差为分数的等差数列。

对于这个问题，我们可以将an拆分为两个分式，即an=1/n-1/(n+1)=1/n-(n/(n(n+1)))=1/n-(n/n(n+1))=1/n-1/(n+1)。因此，an的通项公式为an=1n−1n+1a_n=\frac{1}{n}-\frac{1}{n+1}。

接下来，我们可以使用等差数列和公式求解Sn。根据等差数列和公式，前n项和Sn=n∗a1+n(n−1)2dS_n=n*a_1+\frac{n(n-1)}{2}d，其中a1a_1为首项，d为公差。因此，我们需要求出首项a1a_1和公差d。

由于an=an−1+da_n=a_{n-1}+d，因此d=an−an−1=2n(n−1)−2(n+1)nd=a_n-a_{n-1}=\frac{2}{n(n-1)}-\frac{2}{(n+1)n}，a1=a2−d=12−26=−16a_1=a_2-d=\frac{1}{2}-\frac{2}{6}=-\frac{1}{6}。

将a1a_1和d代入等差数列和公式中，得到Sn=n(−n+26(n+1))=−(n+2)n6(n+1)S_n=n(-\frac{n+2}{6(n+1)})=-\frac{(n+2)n}{6(n+1)}。因此，Sn的通项公式为∑i=0n−1−i+26(i+1)\sum_{i=0}^{n-1}-\frac{i+2}{6(i+1)}。

希望这能帮到您。如果您需要更多关于数列通项公式的信息，请告诉我。我很乐意帮助您。😊

错误纠正

烈焰姐: 使用累加法进行计算.

可是通过你给出的计算过程，我并不能判定这个数列一定是等差数列，我认为使用等差数列求和公式来计算是错误的

感谢您的反馈。您说得对，如果数列不是等差数列，那么使用等差数列求和公式计算是错误的。如果您能提供更多信息，例如数列的前几项或者通项公式，我可以帮您计算出前n项和。如果您想了解如何求Sn的通项公式，可以使用阶差法或递推法进行求解¹²。

源: 与必应的对话， 2023/4/28

  1. 高中数学已知Sn求数列通项公式，老师教的阶差法 .... https://bing.com/search?q=求Sn通项公式.
  2. 高中数学已知Sn求数列通项公式，老师教的阶差法 .... https://baijiahao.baidu.com/s?id=1639169095559425012.
  3. 求数列通项公式an和前n项和Sn的方法 - 百度知道. https://zhidao.baidu.com/question/324744789.html.
  4. 数列求和_百度百科. https://baike.baidu.com/item/数列求和/7318680.
  5. 求数列的通项公式总结 - 知乎. https://zhuanlan.zhihu.com/p/424162014.
  6. 等差数列求和公式及答题技巧 - 知乎. https://zhuanlan.zhihu.com/p/357439130.
  7. 数学学习方法：等差数列求和公式+方法 - 知乎. https://zhuanlan.zhihu.com/p/365793447.
  8. 等差数列求和公式 - 百度百科. https://baike.baidu.com/item/等差数列求和公式/7527418.
  9. 等差数列公式_百度百科. https://baike.baidu.com/item/等差数列公式/2907747.
  10. 如何用等差数列求和公式证明等差数列？ - 知乎. https://www.zhihu.com/question/383760005.

使用累加法计算“已知an＝1/n - 1/(n+1） 求Sn的通项公式“

感谢您的提问。对于已知数列an=1/n-1/(n+1)，求Sn的通项公式，我们可以使用累加法来计算。累加法是一种求解数列通项公式的方法之一，它的原理是对数列的相邻两项之差进行累加，得到数列的前n项和，然后再通过求解前n项和的通项公式来得到数列的通项公式²。

对于这个数列，我们可以先求出前n项和Sn，然后再通过Sn来推导出通项公式。根据题目中给出的an=1/n-1/(n+1)，我们可以得到：

S_n = a_1 + a_2 + ... + a_n= (1 - 1/2) + (1/2 - 1/3) + ... + (1/n - 1/(n+1))= 1 - 1/(n+1)

因此，这个数列的前n项和为1-1/(n+1)。接下来，我们可以通过求解前n项和的通项公式来得到数列的通项公式。由于这个数列不是等差数列，因此不能使用等差数列求和公式来计算³。

如果您还有其他问题，请随时问我。

源: 与必应的对话， 2023/4/28

  1. 高中数学：求数列通项公式的十一种方法（方法全 .... https://zhuanlan.zhihu.com/p/73032201.
  2. 【高考数学】5.16 累加法求通项 - 知乎. https://zhuanlan.zhihu.com/p/369597335.
  3. 数列求和_百度百科. https://baike.baidu.com/item/数列求和/7318680.
  4. 高考数列通项公式解题方法（1）：观察法、公式法 .... https://zhuanlan.zhihu.com/p/103586796.

裂项相消

已知an=1/n(n+1) 求Sn

已知数列 an=1n(n+1)a_n=\frac{1}{n(n+1)}，求 SnS_n。

首先，我们可以把这个求和分成两部分，一种是通项为 nn 的，一种是通项为 nn 的平方的。

通项为 nn 的求和为：$$S_n=\frac{1}{1\cdot2}+\frac{1}{2\cdot3}+\cdots+\frac{1}{n(n+1)}$$

通项为 nn 的平方的求和是本体的重点，现在介绍两种常用的方法。

方法一：裂项相消法

Sn=11⋅2+12⋅3+⋯+1n(n+1)=(1−12)+(12−13)+⋯+(1n−1n+1)=1−1n+1=nn+1\begin{aligned} S_n&=\frac{1}{1\cdot2}+\frac{1}{2\cdot3}+\cdots+\frac{1}{n(n+1)} \\ &=\left(1-\frac{1}{2}\right)+\left(\frac{1}{2}-\frac{1}{3}\right)+\cdots+\left(\frac{1}{n}-\frac{1}{n+1}\right) \\ &=1-\frac{1}{n+1} \\ &=\frac{n}{n+1} \end{aligned}

方法二：数学归纳法

当 n=1n=1 时，显然成立。

假设当 n=k(k⩾1)n=k(k \geqslant 1) 时成立，则当 n=k+1n=k+1 时：

Sk+1=Sk+1(k+1)(k+2)=kk+1+1(k+1)(k+2)=k(k+3)(k+2)(k+3)=k+1k+2\begin{aligned} S_{k+1}&=S_k+\frac{1}{(k+1)(k+2)} \\ &=\frac{k}{k+1}+\frac{1}{(k+1)(k+2)} \\ &=\frac{k(k+3)}{(k+2)(k+3)} \\ &=\frac{k+1}{k+2} \end{aligned}

由数学归纳法可知，对于任意正整数 nn，都有：

Sn=nn+1S_n=\frac{n}{n+1}

源: 与必应的对话， 2023/4/28

  1. 数列an=1/n前n项和的求法 - 百度知道. https://zhidao.baidu.com/question/365193151.html.
  2. 数列求和_百度百科. https://baike.baidu.com/item/数列求和/7318680.
  3. an=n(n+1),sn=? 数学 题目 数列 求和 高中 高一 - 百度知道. https://zhidao.baidu.com/question/89380634.html.
  4. 已知数列{an}中,a1=1,an+1=(n/n+1)an,求an的通向公式,用叠加法. https://www.lishixinzhi.com/zs/post/653219.html.
  5. 已知an=1/[n*(n+1)],求Sn_作业帮. https://qb.zuoyebang.com/xfe-question/question/00b2b6934c5a6ca09ff8a6793019394c.html.

什么是裂项相消

裂项相消是一种数列求和方法，它可以将一个分数拆成两个分数之差的形式，从而使得原来的求和式子变得更加简单。裂项相消法在分数计算中经常用到，先将算式中的项进行拆分，拆成两个或多个数字单位的和或差，拆分后的项可以前后抵消。如果您还有其他问题，请告诉我。

源: 与必应的对话， 2023/4/28

  1. 什么是裂项法，裂项相消法例题详解和公式总结-百度 .... https://jingyan.baidu.com/article/0bc808fc8496ed5ad585b916.html.
  2. 高中数学必会裂项相消 - 百度经验. https://jingyan.baidu.com/article/a24b33cd78c2af58ff002b31.html.
  3. 带根号的裂项相消公式_百度知道. https://zhidao.baidu.com/question/592508045053078165.html.
  4. 数列必须满分系列(3.2) 数列求和---裂项相消 - 知乎. https://zhuanlan.zhihu.com/p/39123013.
  5. 初中数学之裂项相消法 - 知乎. https://zhuanlan.zhihu.com/p/376399356.
  6. 数列中裂项相消法如何裂项？ - 知乎. https://www.zhihu.com/question/396939682.

后记

烈焰姐赢了, 人类的胜利(bus) 查证固然重要, 但是查证的前提是得有足够的知识储备, 说实话Chatgpt开始给的答案着实让我一脸懵), 不过烈焰姐很轻松就判断出来chatgpt的答案是错误的了, 着实让人佩服. 工具的上限取决于使用的人 ,让我很清楚的明白了这个道理)

另外，是烈焰姐告诉我的“焰式解法”，我总结过后扔这里了，很简单的方法，就是有点玄学XD

202304282117252.png (715×418) (imc.re)

向量求和法

math-fxlqf.svg

]]> <h1 id="前言"><a class="markdownIt-Anchor" href="#前言"></a> 前言</h1> <p>尝试借由Newbing学习高中数学相关知识 <s>(并非应付烈焰姐的提问)</s> ,用chatgpt学习数学的话需要具备很重要的一点技能, 就是<strong>自行查证</strong>的能力) 如果只是一味吸收, 不进行任何错误查证的话, 很容易学习到错误的知识, 不过这在我看来, 既是弊端的同时, 也是一个作为训练自己能力的优势)</p>