shell excel导入mysql_mysql,shell_MySQL导入数据问题，mysql,shell,excel - phpStudy

MySQL导入数据问题

新手问题，望各位大大不惜赐教，先谢过了。

问题开始：

我在尝试把一个在公共领域发布的一类商品定价导入到MySQL中，并最终通过一些php绘图程序显示某样商品的价格走势。(跟股票走势图差不多)目前先想把数据导入这块做好，绘图我想再慢慢研究可以研究出来。

数据来源是一个每天都会更新一次的txt文件，这个txt文件大概有18000行，我把2013-06-02的txt的头5行的内容粘贴过来，Prodct字段是是唯一的商品名：

Product|Price|StdDev|Average|High|Low|Change|Raw N

Honey Cake|1.00|0.00|1.00|1.00|1.00|0.00|1

Cheese Cake (Grade A)|0.25|0.00|0.25|0.25|0.25|0.00|1

Cheese Cake (Grade B)|0.25|0.00|0.25|0.25|0.25|-0.13|1

MoonCake|0.25|0.00|0.25|0.25|0.25|0.00|1

可以看出数据是由7个"|"分割成8个字段组成的。

于是我先从建立一个叫做productprice的table开始，总共建立了9栏(包括一个非得创建的id字段？)：

create table productprice(

id int not null auto_increment, // 问题一：貌似建立MySQL一定需要一个id字段？

product varchar(40) not null,

price int,

stddev int,

average int,

high int,

low int,

changen int, // 问题二：我对应会原来的表格写 change int, 但MySQL不让建，于是我改成changen

rawn int,

primary key(id)

)engine=innodb charset=utf8;

因为数据的第一行Product|Price|StdDev|Average|High|Low|Change|Raw N

没有用，于是我手工把第一行去掉。 //问题三：在Linux下用什么命令可以自动去掉一个txt文件的第一行呢？

然后我用这个命令导入数据：

LOAD DATA LOCAL INFILE '/path/20130602.txt' INTO TABLE productprice

FIELDS TERMINATED BY '|';

哗啦哗啦零点几秒之内就导入好了，截个图上来：

明显地因为存在了ID字段，所以就对不上了，所有数据都往左偏移了一格，product名字不见了，price去到了product的位置，结果我就卡在这里了。

我的问题：

问题一：貌似建立MySQL一定需要一个id字段？

在建立table的时候好像不建立id的话不让操作，我只好建立了一个id，但要如何跟我下载下来的数据匹配呢？因为下载下来的数据是没有id的，但product是唯一。

问题二：我对应回原来的表格写 change int, 但MySQL不让建，于是我改成changen

这个好像无伤大雅，我先当change是一个非法的名字了。

问题三：在Linux下用什么命令可以自动去掉一个txt文件的第一行呢？

还有回到问题一，我需要在每行前面加一个1| 2| 3|这样的数据吗？如果想通过Linux脚本操作的话要如何进行呢？(因为到最后我想把整个流程自动化下来，每天定时下载报价，导入MySQL)

问题四：因为报价每天都会更新一次，我再把相近的内容再导入数据库中不就变得很诡异？后续绘走势图的话很明显还缺少一个时间的字段啊(请告诉我根据我的需求应该要怎么建立表格比较好？)

问题五：问题四的延伸，我看了一下炒股软件，做法是把例如000001的股票的每天的价格都写入一个文本文件中，例如有100支股票，就有100个TXT文件，这种储存方法看起来很不错，但我的例子有18000支“股票”，而且每隔几个月表里面的产品会增加或者减少，我没有能力把增加和减少的产品挑出来，如果这样做的话，php读取txt里面的东西比读取MySQL中的要方便吗？其实对我来说最重要的就是product和price这两个字段，如果写入txt中体积也不会增加好多，想起来也比放在MySQL科学一点。

最后的问题：你会怎么做一个这样的东西呢？

相关阅读:

新手求教Python生成.exe程序步骤？要能完美兼容64和32位windows8.1 windows8 windows 7

ios UIImageView 加载网络图片控件大小发生改变，这么解决？

jQuery.trigger()触发hover等事件的问题

在选择android API版本的时候 14和15的区别

zblog全站静态化实现方式？

URL的openStream()为什么在服务器上获取不了？

寻求靠谱的支付宝的python包

ResultSet的gtter方法只能读取一次，为何如此设计？

Django 这样的不同用户类型如何实现好？

求批量正则表达式修改文件名的命令。windows/linux都OK

为什么wordpress导出的xml格式文件图片都能包含?

video.js 视频自适应

xcode 集成第三方控件一般都使用什么？

滑动tableview的时候如何固定tableHeaderView不动

做了一个移动端网页，使用之后无法分享到微信朋友圈和好友

IE8下不能显示，说是不支持该对象或方法，chrome与firefox上正常显示。

codeception的suite是什么概念？

仿站：织梦，后台html加载jquery解析xml？

linux apt-get update error

关于OSGI与Spring Intergration 的关系？