Welcome

首页 / 操作系统 / Linux

Linux下删除大数据文件中部分字段重复行的方法

2017-02-06 28
最近写的一个数据采集程序生成了一个含有1千多万行数据的文件，数据由4个字段组成，按照要求需要删除第二个字段重复的行，找来找去linux下也没找到合适的工具，sed/gawk等流处理工具只能针对一行一行处理，并无法找到字段重复的行。看来只好自己python一个程序了，突然想起来利用mysql，于是进行乾坤大挪移： 1. 利用mysqlimport --local dbname data.txt导入数据到表中，表名要与文件名一致 2. 执行下列sql语句（要求...

Linux中限制用户访问权限的3种方法

2017-02-06 36
现在需要限定某个用户对特定目录/文件的访问权限，或者把某个用户的访问范围限制在某个目录/文件中。现实情况下，还是能遇到这样的需求的，比如说ubuntu下有多个可登录用户，默认情况下，用户A的工作目录（一般为/home/A）对任何其他用户来说都是可读的，但是用户A可能不希望其他用户（或者某个特定用户）读取A的文件。这里提出三个解决方案。第一种：使用chmod更改特定目录的权限。这能起到限制特定目录被某些人访问的作用，限定某个用户的目的也能达到，但是会误伤其他...

清除swap里的文件的方法

2017-02-06 27
方法很简单，按下面的操作就可以了vi打开一个文件的时候突然断网，再次连接上去vi打开的时候提示在swap里面已经存在一个。要删除这个文件怎么办呢？如下：关了swapoff -a后再ls -al查看把文件所在目录里*.swp结尾的文件rm了就OK了...

linux修改系统时间和linux查看时区、修改时区的方法

2017-02-06 28
一、查看和修改Linux的时区1. 查看当前时区命令 ： "date -R"2. 修改设置Linux服务器时区方法 A命令 ： "tzselect"方法 B 仅限于RedHat Linux 和 CentOS命令 ： "timeconfig"方法 C 适用于Debian命令 ： "dpkg-reconfigure tzdata"3. 复制相应的时区文件，替换系统时区文件；或者创建...

linux查找可执行文件的方法

2017-02-06 27
linux下查找可执行文件ls -F|grep "*"这样就可以了！ls -F | grep /$是什么意思ls -F的意思是把文件按照类型归类，并且在末尾加上/ *等符号标识| 管道输出，把前面命令的结果当做输入传给后面的命令grep /$的意思是从中挑出以/结尾的行，/就是标识是目录-F, --classifyappend indicator （one of */=>@|） to entries例子：复制代码代码如下:[roo...

Broadcom网卡linux系统下无法连接到网络问题的解决办法

2017-02-06 49
其实我在上个星期之前，都没有自己装过系统（不过其中有过一次下载了ubuntu12.04来安装，是在win7环境下，忘记当时是直接双击安装还是用虚拟机运行安装，反正就跟装个什么软件或者游戏一样的简单，我觉得这个就不算是真正的装系统），到此刻我也没有自己装过windows系统。某天我觉得我必须要重装系统了，理由是电脑上莫名其妙的给我装了一个瑞星，然后各种杀毒软件没事就报各种“有病毒，要警惕！”，关键是我没找到瑞星的卸载程序，用360或者...

通过rdesktop实现Linux和Windows操作系统远程互访

2017-02-06 55
Linux和Windows操作系统远程互访的方法 您想在Linux系统下远程访问Windows系统，在Windows、UNIX下远程访问Linux系统吗，本文教您如何做。 rdesktop 是UNIX 和Linux 系统的一个远程桌面连接软件，它通过MicrosoftWindows NT、Windows 2000 提供的终端服务（Terminal Services）以及WindowsXP 的远程桌面服务（Remote Desktop），能在Linux系统下...

linux查看当前shell的方法

2017-02-06 53
1、实时查看当前进程中使用的shell种类：推荐复制代码代码如下:ps |grep $$|awk "{print $4}" （注：$$表示shell的进程号）2、最常用的查看shell的命令，但不能实时反映当前shell复制代码代码如下:$ echo $SHELL3、更简洁，但并不是所有shell都支持复制代码代码如下:$ echo $04、环境变量中shell的匹配查找复制代码代码如下:env | grep SHELL5、口令文件中shell的匹配查找复...

linux中ssh使用rsa免密码登录方法

2017-02-06 34
A为本地主机（即用于控制其他主机的机器） ;B为远程主机（即被控制的机器Server）, 假如ip为172.24.253.2 ;在A上的命令:复制代码代码如下: ssh-keygen -t rsa （连续三次回车,即在本地生成了公钥和私钥,不设置密码,生成的公钥私钥在~/.ssh目录下，id_rsa是私钥， id_rsa.pub是公钥 ）复制代码代码如下:ssh <a href="mailto:muye@172.24.253.2">muye@1...

rhel6.3使用yum安装apache的方法

2017-02-06 33
1、安装httpd软件包：Yum install httpd2、启动apache服务：[root@redhat Desktop]# /etc/init.d/httpd startStarting httpd: [ OK ]3、安装mod-ssl软件包[root@redhat Desktop]# yum install mod_ssl –y4、创建一个/date/www/html的目录、并且修改安全上下文：Chcon –t httpd...

虚拟机中linux使用本地iso作为yum源的方法

2017-02-06 45
虚拟机中的linux有时不能连接上外网，为了能够方便的安装各种packages，于是调查配置本地yum安装的方法。首先，将作为源的iso的挂载到系统上。复制代码代码如下:mount -o loop /dev/cdrom /mnt/iso/或者mount -o loop /xxx/xxx.iso /mnt/iso/其中/mnt/iso是事先在本地建立的文件夹。然后将文件iso.repo拷入文件夹/etc/yum.repos.d如果文件夹/etc/yum.re...

图解linux系统的软连接和硬链接

2017-02-06 26
我自己做的图片大家参考下：软连接硬链接的区别：硬连接指通过索引节点来进行的连接。在Linux的文件系统中，保存在磁盘分区中的文件不管是什么类型都给它分配一个编号，称为索引节点号（Inode Index）。在Linux中，多个文件名指向同一索引节点是存在的。一般这种连接就是硬连接。硬连接的作用是允许一个文件拥有多个有效路径名，这样用户就可以建立硬连接到重要文件,以防止“误删”的功能。其原因如上所述，因为对应该目录的索引节点有一个以上的...

linux系统中apache服务的优先级

2017-02-06 28
安装php软件包：安装文本浏览器安装apache的帮助文档：测试下是否ok启动Apache服务关闭火墙：编辑一个php测试页测试下：perl语言包默认系统已经安装了，直接测试下：Apache服务队cgi语言的配置：测试下是否ok在apache服务的主目录下有index.Php文件和apache.html文件，为什么要先执行php文件呢？apache的配置文件最前面写的是这些服务：所以apache服务启动时会优先考虑这下面的服务...

mingw仿linux开发环境详解

2017-02-06 32
MinGW 默认安装MSYS。通常打开的 MinGW Shell 其实 MSYS，MinGW 作为一个组件存在。MSYS -- Minimal SYStem，是一个 Bourne Shell 解释器。MinGW -- Minimalist GNU for Windows. 基于原生 windows 的开发环境，不是虚拟机。以 MinGW 安装根目录为 D:MinGW 为例。1. 挂载文件系统挂载到 MSYS 下可以方便使用，新版的 MinGW 已经默认自动...

linux静态库和动态库的创建与使用

2017-02-06 28
静态库与动态库的创建与使用1. 基本概念静态库：链接时，库与编译生成的 .o 文件一起打包到可执行文件中。 linux / windows 下扩展名分别为：.a / .lib动态库：链接时，不会打包到可执行文件中， 执行时会动态的加载动态库。 linux / windows 下扩展名分别为：.so / .dll区别主要体现在：a、可维护性。合入更新。合入动态库的更新，只要替换库即可。但合入静态则需要重新链接，生成新的可执行程序，全量更新。环境依赖。若包含静...

linux安装自定义字体的方法

2017-02-06 43
1、修改字体配置文件（需要Root权限），将需要添加的字体添加入列表复制代码代码如下:sudo gedit /etc/fonts/fonts.conf复制代码代码如下:<！-- Font directory list --><dir>/usr/share/fonts</dir><dir>/usr/X11R6/lib/X11/fonts</dir> <dir>/usr/local/sha...

做linux计划任务的步骤

2017-02-06 27
一次性计划任务的安排： at ：安排作业在某一时刻执行一次（一般都是用它）batch：安排作业在系统负载不重时执行一次第一步： #service atd start 开启一次性计划任务 at 时间1、绝对的计时方法 midnightnoonteatimeHH:MM[today]HH:MM[tommorow]HH:mm 星期HH:MM mm/dd/yy 2、相对的计时方法复制代码代码如下:now + n minutesnow + n hoursnow + n...

linux查看磁盘挂载的三种方法

2017-02-06 143
第一种方法：使用df命令，例如：复制代码代码如下:orientalson:/home # dfFilesystem 1K-blocksUsed Available Use% Mounted on/dev/sda2 15213032 8043668 7169364 53% /udev514496 104514392 1% /dev/dev/mapper/vg_test-lv_test511980 32840479140 7% /home/mtoriental...

ubuntu系统修改系统最大打开文件数的步骤

2017-02-06 48
第一步：配置/etc/security/limits.confsudo vim /etc/security/limits.conf文件尾追加 复制代码代码如下:* hard nofile 40960* soft nofile 40960第二步：/etc/pam.d/su（官方）或/etc/pam.d/common-session（网络）复制代码代码如下:sudo vim /etc/pam.d/su将 pam_limits.so 这一行注释去掉 复制代码代码...

使用dd命令测试linux磁盘读写速度的方法

2017-02-06 53
1、先熟悉两个特殊的设备：（1）/dev/null：回收站、无底洞。（2）/dev/zero：产生字符。2、测试磁盘写能力复制代码代码如下:time dd if=/dev/zero of=/testw.dbf bs=4k count=100000因为/dev//zero是一个伪设备，它只产生空字符流，对它不会产生IO，所以，IO都会集中在of文件中，of文件只用于写，所以这个命令相当于测试磁盘的写能力。命令结尾添加oflag=direct将跳过内存缓存，添...
<< 61 62 63 64 65 66 67 68 69 70 >>
版权所有©石家庄振强科技有限公司2024 冀ICP备08103738号-5 网站地图