50 lines
2.6 KiB
Plaintext
50 lines
2.6 KiB
Plaintext
cd C:\Users\Coz\Desktop\tools\
|
||
cd /www/neteasemusic/tools
|
||
node index --utils song --min 1800000000 --max 2000000000 --order DESC #
|
||
node index --utils song --min 1290000000 --max 1500000000 --order DESC #
|
||
node index --utils song --min 400000000 --max 1000000000 --order ASC #
|
||
node index --utils song --min 0 --max 400000000 --order ASC #
|
||
#############################################################################################
|
||
node index --utils album --min 134000000 --max 160000000 #
|
||
node index --utils album --min 0 --max 134000000 #
|
||
#############################################################################################
|
||
node index --utils artist #
|
||
#############################################################################################
|
||
node index --utils comment --min 1800000000 --max 2000000000 --order DESC #
|
||
node index --utils comment --min 1290000000 --max 1500000000 --order DESC #
|
||
node index --utils comment --min 400000000 --max 1000000000 --order ASC #
|
||
node index --utils comment --min 0 --max 400000000 --order ASC #
|
||
#############################################################################################
|
||
node index --utils lyric --min 1800000000 --max 2000000000 #
|
||
node index --utils lyric --min 400000000 --max 1000000000 #
|
||
node index --utils lyric --min 0 --max 400000000 #
|
||
#############################################################################################
|
||
node index --utils playlist #
|
||
|
||
|
||
后期:
|
||
|
||
批量查库修改为一条SQL搞定
|
||
|
||
歌单定时更新(rel表中添加一个del字段,先将歌单下面的全部置为删除状态,再插入的时候把已有歌曲的标记重新修改为正常状态)
|
||
|
||
评论的更新
|
||
|
||
爬取歌单playlist
|
||
|
||
被删除的aritst和album回头再通过其他表中的数据反查回来
|
||
|
||
|
||
说明:
|
||
song表中data_version=1的音乐是第一次爬取的时候存在,但是后面再爬取时不存在的音乐
|
||
|
||
|
||
|
||
后续分区(不能在现有表上修改,只能重新查出数据到新表)
|
||
alter table song add partition (
|
||
PARTITION p1 VALUES LESS THAN ( 50000000),
|
||
PARTITION p2 VALUES LESS THAN (1000000000),
|
||
PARTITION p3 VALUES LESS THAN (1500000000),
|
||
PARTITION p4 VALUES LESS THAN (2000000000),
|
||
PARTITION p5 VALUES LESS THAN MAXVALUE
|
||
); |